世界首款！清华大学芯片取得突破

近日，清华大学在类脑视觉感知芯片领域取得重要突破：

清华大学依托精密仪器系的类脑计算研究中心施路平教授团队，提出一种基于视觉原语的互补双通路类脑视觉感知新范式，研制出世界首款类脑互补视觉芯片“天眸芯”。基于该研究成果的论文《面向开放世界感知、具有互补通路的视觉芯片》（A Vision Chip with Complementary Pathways for Open-world Sensing）作为封面文章，登上5月30日的《自然》杂志。

这是该团队继异构融合类脑计算“天机芯”后第二次登上 《自然》 杂志封面，标志着在类脑计算和类脑感知两个方向上均取得重要突破。

这一成果与我们的日常生活有哪些关系？据介绍，随着人工智能的飞速发展，无人驾驶和具身智能等无人系统在现实社会中不断推广应用，其中，视觉感知作为获取信息的关键途径，发挥着至关重要的作用。然而，在复杂多变且不可预测的环境中，实现高效、精确且鲁棒的视觉感知依然是一个艰巨的挑战。

在开放世界中，智能系统不仅要处理庞大的数据量，还需要应对各种极端事件，如驾驶中的突发危险、隧道口的剧烈光线变化、夜间强闪光干扰等。传统视觉感知芯片由于受到“功耗墙”和“带宽墙”的限制，在应对这些场景时往往面临失真、失效或高延迟的问题，严重影响系统的稳定性和安全性。

为了克服这些挑战，清华大学精密仪器系类脑计算研究团队聚焦类脑视觉感知芯片技术，提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。该范式借鉴了人类视觉系统的基本原理，将开放世界的视觉信息拆解为基于视觉原语的信息表示，并通过有机组合这些原语，模仿人视觉系统的特征，形成两条优势互补、信息完备的视觉感知通路。

基于这一新范式，团队进一步研制出了世界首款类脑互补视觉芯片“天眸芯”，在极低的带宽和功耗代价下，实现了每秒10000帧的高速、10bit的高精度、130dB的高动态范围的视觉信息采集，不仅突破了传统视觉感知范式的性能瓶颈，而且能够高效应对各种极端场景，确保系统的稳定性和安全性。

基于“天眸芯”，团队还自主研发了高性能软件和算法，并在开放环境车载平台上进行了性能验证。在多种极端场景下，该系统实现了低延迟、高性能的实时感知推理，展现了其在智能无人系统领域的巨大应用潜力。

据悉，论文通讯作者为清华大学精密仪器系施路平教授和赵蓉教授。研究团队表示，“天眸芯”的成功研制为自动驾驶、具身智能等重要应用开辟了新的道路。结合团队在类脑计算芯片“天机芯”、类脑软件工具链和类脑机器人等方面已应用落地的技术积累，“天眸芯”的加入将进一步完善类脑智能生态，有力推动人工通用智能的发展。

综合：人民日报客户端、清华大学视频号

来源： 中国经济网

新突破！我国科学家研制出世界首款类脑互补视觉芯片“天眸芯”

中国青年报客户端北京5月30日电（中青报·中青网记者 杨洁）清华大学精密仪器系的施路平教授团队，提出一种基于视觉原语的互补双通路类脑视觉感知新范式，研制出世界首款类脑互补视觉芯片“天眸芯”。该研究成果的论文“面向开放世界感知、具有互补通路的视觉芯片”作为封面文章，登上5月30日的《Nature》杂志封面文章。

这是该团队继异构融合类脑计算“天机芯”后，第二次登上《Nature》杂志封面，标志着中国在类脑计算和类脑感知方向取得重要突破。

清华大学精密仪器系类脑计算研究团队聚焦类脑视觉感知芯片技术，提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。该范式借鉴了人类视觉系统的基本原理，将开放世界的视觉信息拆解为基于视觉原语的信息表示，并通过有机组合这些原语，模仿人视觉系统的特征，形成两条优势互补、信息完备的视觉感知通路。

清华大学研制“天眸芯” 再次登上《Nature》杂志封面。清华大学供图

基于这一新范式，团队进一步研制出了世界首款类脑互补视觉芯片“天眸芯”。论文通讯作者为清华大学精密仪器系施路平教授和赵蓉教授，精密仪器系博士杨哲宇（现为北京灵汐科技有限公司研发经理）、精密仪器系博士生王韬毅、林逸晗为论文的共同第一作者。清华大学为论文第一单位，合作单位包括北京灵汐科技有限公司。

类脑互补视觉感知芯片“天眸芯”。清华大学供图

随着人工智能的飞速发展，无人驾驶和具身智能等无人系统正在现实社会中不断推广应用。视觉感知作为获取信息的核心途径，发挥着至关重要的作用。然而，在复杂多变且不可预测的环境中，实现高效、精确且鲁棒（即在异常和危险情况下系统生存的能力）的视觉感知依然是一个艰巨的挑战。

在开放世界中，智能系统不仅要处理庞大的数据量，还需要应对各种极端事件，如驾驶中的突发危险、隧道口的剧烈光线变化和夜间强闪光干扰等。传统视觉感知芯片由于受到“功耗墙”和“带宽墙”的限制，在应对这些场景时往往面临失真、失效或高延迟的问题，严重影响了系统的稳定性和安全性。

“天眸芯”在极低的带宽（降低90%）和功耗代价下，实现了每秒10000帧的高速、10bit的高精度、130dB的高动态范围的视觉信息采集。它不仅突破了传统视觉感知范式的性能瓶颈，而且能够高效应对各种极端场景，确保系统的稳定性和安全性。

基于“天眸芯”，团队还自主研发了高性能软件和算法，并在开放环境车载平台上进行了性能验证。在多种极端场景下，该系统实现了低延迟、高性能的实时感知推理，展现了其在智能无人系统领域的巨大应用潜力。

清华大学精密仪器系类脑计算研究团队。摄影/张兆基

清华大学精密仪器系类脑计算研究团队。摄影/张兆基

“天眸芯”的成功研制是智能感知芯片领域的一个重大突破。它不仅为智能革命的发展提供了一个强大的技术支持，还为自动驾驶、具身智能等重要应用开辟了新的道路。结合团队在类脑计算芯片“天机芯”、类脑软件工具链和类脑机器人等方面已应用落地的技术积累，“天眸芯”的加入将进一步完善类脑智能生态，有力地推动人工通用智能的发展。

这项研究得到了科技部科技创新2030“脑科学与类脑研究”重大项目和自然基金委的支持，也得到了清华大学/IDG-麦戈文脑科学研究院的支持。

来源：中国青年报客户端

相关问答

芯片灯一闪一闪的是什么原因?

1、LED灯珠与LED驱动电源不匹配,正常单颗足1W灯珠承受电流:80-300mA,电压:3.0-3.4V,如果灯珠芯片不是足功率的,就会造成灯光光源频闪现象,电流过高灯珠不...1...

核辐射检测仪用什么芯片?

核辐射检测仪通常使用的是现场可编程门阵列(FPGA)芯片。FPGA芯片具有灵活性和可重新配置的特点,可以实现各种功能和算法,适用于不同类型的核辐射检测仪器。...

海信电视求救,指示灯闪烁不能开机。-ZOL问答

③、即然以上测量都正常,但上电试机故障依旧,这时在测量一下,主板上的所有DC一DC电压变换电路芯片,各输出端引脚对地电压是否正常,如有异常,那就重点检查一下芯...

电子烟花的原理是什么?

神的倡...指不使用火药,而是内部采用电子元器件,通过灯光反射彩带,彩屑来产生普通烟花火焰爆炸那样的绚烂多彩效果的烟花。它不会对大气造成污染,可以反复使用,...

万年历语音报时闪屏怎么回事?

一、供电不稳,这种情况是很少见的;二、数码万年历机芯线路板中的稳压管(7805)坏掉了,换掉它就可以了;三、数码万年历机芯线路板中的时控芯片坏掉了,...二...

汽车大灯闪烁是什么原因

[回答]查大灯的接线;2.汽车电池电量不足,汽车处于失电状态。解决办法是及时给电池充电;3.汽车电脑连接的一些电路有故障,比如灯泡故障,稳压器故...解决...

电池升压芯片哪一种更适合呢?

电池升压芯片哪一种更适合?选择升压芯片需要考虑几个参数,输入电压范围、开关功率、工作效率等。使用3.7V的锂电池升压到12V,给350mA的负载供电,本来使用的66...

佳能打印机电源指示灯上下交替闪烁7下,是怎么回事?-ZOL问答

因为打印机主板上有一个IC芯片是用来记载你的打印机的清洗次数的。所以,日后我建议你不要经常地开关机。因为关开一次打印机它就会自动清洗一次。到了芯片记...

五菱宏光钥匙开门后双闪一直在闪?

检查一下应急开关按钮吧!车辆行驶中,双闪是不正常的。汽车双闪灯一直闪可能是一下几种问题:1、车钥匙上的防盗芯片。2、行车电脑对防盗芯片的识别系统。3、...

为什么屏幕有时会闪出白色的横线?

2、显示器和主机的连接线松动导致的,检查下连接线。3、驱动问题导致的,更新下显卡驱动。4、显卡接触不良或显示芯片有问题,插拔下显卡,用橡皮擦拭下显卡...