清华「天眸芯」登Nature封面：全球首款类脑互补视觉芯片
输入“/”快速插入内容
清华「天眸芯」登Nature封面：全球首款类脑互补视觉芯片
清华「天眸芯」登Nature封面：全球首款类脑互补视觉芯片
2024年8月12日修改
转载请联系原作者取得授权
编辑：泽南、小舟
我国在类脑计算、类脑感知两个重要方向均已取得基础性突破。
在开放世界中，智能系统不仅要处理庞大的数据量，还需要应对各种「长尾问题」，如自动驾驶中面临的突发危险、出入隧道的剧烈光线变化、夜间强闪光干扰等。在这类任务上，传统视觉感知芯片由于受到「功耗墙」和「带宽墙」的限制，往往面临失真、失效或高延迟的问题，严重影响系统的稳定性和安全性。
为了克服这些挑战，清华大学精密仪器系类脑计算研究中心聚焦类脑视觉感知芯片技术，提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。
5 月 30 日，该研究的论文《面向开放世界感知、具有互补通路的视觉芯片》（A Vision Chip with Complementary Pathways for Open-world Sensing）登上《自然》杂志封面。这是该团队继 2019 年 8 月的类脑计算芯片「天机芯」后，第二次登上《自然》封面，标志着国内芯片领域在类脑计算和类脑感知两个重要方向上均已取得基础性突破。
5 月 30 日新一期《自然》杂志封面。
据介绍，新研究提出了一种受 HVS 多级特性启发的互补感知范式，其借鉴人类视觉系统的基本原理，将开放世界的视觉信息拆解为基于视觉原语的信息表示，并通过有机组合这些原语，模仿人视觉系统的特征，形成两条优势互补、信息完备的视觉感知通路。
基于这一新范式，团队研制出了世界首款类脑互补视觉芯片「天眸芯」（Tianmouc）， 它可以在极低的带宽（降低 90%）和功耗条件下，实现每秒 10000 帧的高速、10bit 的高精度、130dB 的高动态范围视觉信息采集 。它不仅突破了传统视觉感知范式的性能瓶颈，而且能够高效应对各种极端场景，确保系统的稳定性和安全性。