清华「天眸芯」登Nature封面：全球首款类脑互补视觉芯片

文章摘要

【关 键 词】 智能感知、类脑计算、视觉芯片、天眸芯、性能突破

清华大学精密仪器系类脑计算研究中心提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。

该团队研制的世界首款类脑互补视觉芯片「天眸芯」，以人类视觉系统为灵感，通过模仿人类视觉特征，实现了两条优势互补的视觉感知通路。

该芯片在极低带宽（降低90%）和功耗条件下，能实现每秒10000帧的高速、10bit的高精度、130dB的高动态范围视觉信息采集。

「天眸芯」的设计克服了多个技术挑战，包括像素阵列的设计和异构读出架构的构建。

它采用90 nm CMOS背照式技术制造，混合像素阵列模仿感光细胞，能解析不同颜色和光谱的视觉信息。

研究团队对其性能进行了全面评估，结果显示「天眸芯」在量子效率、动态范围等方面表现出色。

在实际应用中，「天眸芯」在开放世界的车载平台上进行了性能验证。

在各种极端场景下，该系统展现出低延迟、高性能的实时感知推理能力。

特别设计的多路径算法利用了「天眸芯」的互补特性，提高了检测性能，同时保持了低功耗和低带宽的特点。

这项技术的成功为新一代AI技术的发展提供了算力支持，并为自动驾驶、具身智能等领域开辟了新路径。

通过结合类脑计算芯片天机芯、类脑软件工具链和类脑机器人等技术，「天眸芯」的加入将进一步完善类脑智能生态系统。

该研究也为开发用于开放世界应用的先进计算机视觉理论、算法和系统提供了新途径。

原文和模型

【原文链接】 阅读原文 [ 2661字 | 11分钟 ]
【原文作者】 机器之心
【摘要模型】 glm-4
【摘要评分】 ★★★★★

智谱AI

智谱AI是由清华大学计算机系技术成果转化而来的公司，致力于打造新一代认知智能通用模型。公司合作研发了双语千亿级超大规模预训练模型GLM-130B，并构建了高精度通用知识图谱，形成数据与知识双轮驱动的认知引擎，基于此模型打造了ChatGLM（chatglm.cn）。此外，智谱AI还推出了认知大模型平台Bigmodel.ai，包括CodeGeeX和CogView等产品，提供智能API服务，链接物理世界的亿级用户、赋能元宇宙数字人、成为具身机器人的基座，赋予机器像人一样“思考”的能力。