清华类脑互补视觉芯片突破再登《自然》封面

2024年5月30日《自然》杂志封面。图片来源：《自然》杂志网站

研究团队聚焦类脑视觉感知芯片技术，提出一种基于视觉原语的互补双通路类脑视觉感知新范式——借鉴人类视觉系统的基本原理，将开放世界的视觉信息拆解为基于视觉原语的信息表示，并通过有机组合这些原语，模仿人视觉系统的特征，形成两条优势互补、信息完备的视觉感知通路。

在此基础上，团队研制出世界首款类脑互补视觉芯片“天眸芯”，在极低的带宽（降低90%）和功耗代价下，实现每秒10000帧的高速、10bit的高精度、130dB的高动态范围的视觉信息采集，不仅突破传统视觉感知范式的性能瓶颈，而且能够高效应对各种极端场景，确保系统的稳定性和安全性。

类脑互补视觉芯片“天眸芯”。图片来源：清华大学

基于“天眸芯”，团队还自主研发高性能软件和算法，并在开放环境车载平台上进行性能验证。在多种极端场景下，该系统实现低延迟、高性能的实时感知推理，展现其在智能无人系统领域的巨大应用潜力。