随着人工智能的快速发展，无人驾驶和特定智能等无人系统在现实社会中不断推广和应用，引领了新一轮的科技革命和产业变革。在这些智能系统中，视觉感知作为获取信息的核心方式发挥着至关重要的作用。然而，在复杂、多变、不可预测的环境中，实现高效、准确、鲁棒的视觉感知仍然是一个艰巨的挑战。
在开放的世界里，智能系统不仅需要处理大量的数据，还需要处理各种极端事件，如驾驶中的紧急危险、隧道入口的剧烈光变化和夜间的强闪光干扰。由于“功耗墙”和“带宽墙”的限制，传统的视觉感知芯片在处理这些场景时经常面临扭曲、故障或高延迟，严重影响了系统的稳定性和安全性。
为了克服这些挑战，清华大学精密仪器系统大脑计算研究中心专注于大脑视觉感知芯片技术，提出了一种基于视觉原始语言的互补双通道大脑视觉感知新范式。该范式借鉴了人类视觉系统的基本原理，将开放世界的视觉信息分解为基于视觉原始语言的信息表达，模仿人类视觉系统的特征，形成两种互补优势和完整信息的视觉感知渠道。基于这一新范式，团队进一步开发了世界上第一款类脑互补视觉芯片“天眼芯”，在极低的带宽(降低90%)和功耗成本下，实现了每秒1万帧的高速、10bit的高精度、130dB的高动态视觉信息采集。它不仅突破了传统视觉感知范式的性能瓶颈，而且能有效应对各种极端场景，保证系统的稳定性和安全性。基于“天眼芯”，团队还自主开发了高性能软件和算法，并在开放环境车载平台上进行了性能验证。在各种极端情况下，该系统实现了低延迟、高性能的实时感知推理，显示了其在智能无人系统领域的巨大应用潜力。
“天眼芯”的成功发展无疑是智能感知芯片领域的重大突破。它不仅为智能革命的发展提供了强有力的技术支持，也为自动驾驶、具体智能等重要应用开辟了新的道路。类脑计算芯片“天机芯”与团队相结合、应用于类脑软件工具链和类脑机器人的技术积累，“天眼芯”的加入将进一步完善类脑智能生态，有效促进人工通用智能的发展。获取更多有价值的信息 访问：https://byteclicks.com
5月30日，基于这一研究成果的论文“面向开放世界感知、互补通道的视觉芯片”（A Vision Chip with Complementary Pathways for Open-world Sensing）作为封面文章，登上《自然》（Nature）杂志。这是该团队第二次登上《自然》杂志的封面，这标志着中国在类脑计算和类脑感知两个重要方向上取得了基本突破。
版权声明：除特别说明外，本网站所有文章均为 字节点击 采用原创内容 BY-NC-SA 知识共享协议。原文链接：https://byteclicks.com/59845.html 请以链接的形式注明本文的地址。转载本网站的内容不得用于任何商业目的。本网站转载的内容版权归原作者所有，文章内容仅代表作者的独立观点，不代表字节点击位置。报告中所有的商标、图像版权、专利和其他版权信息属于其合法持有人，仅用于传递信息和非商业用途。如有侵权行为，请联系 gavin@byteclicks.com。我们将协调处理。