世界首款!清华类脑互补视觉芯片“天眸芯”登《自然》封面
创始人
2024-05-31 05:21:04
0

近日,清华大学在类脑视觉感知芯片领域取得重要突破:精密仪器系的类脑计算研究中心教授施路平团队,提出一种基于视觉原语的互补双通路类脑视觉感知新范式,研制出世界首款类脑互补视觉芯片“天眸芯”。基于该研究成果的论文《面向开放世界感知、具有互补通路的视觉芯片》作为封面文章,登上了5月30日的《自然》杂志。

这是该团队继异构融合类脑计算“天机芯”后第二次登上 《自然》 杂志封面,标志着在类脑计算和类脑感知两个方向上均取得重要突破。

据介绍,随着人工智能的飞速发展,无人驾驶和具身智能等无人系统在现实社会中不断推广应用。其中,视觉感知作为获取信息的关键途径,发挥着至关重要的作用。然而,在复杂多变且不可预测的环境中,实现高效、精确的视觉感知依然是一个艰巨的挑战。智能系统不仅要处理庞大的数据量,还需要应对各种极端事件,如驾驶中的突发危险、隧道口的剧烈光线变化、夜间强闪光干扰等。传统视觉感知芯片由于受到“功耗墙”和“带宽墙”的限制,在应对这些场景时往往面临失真、失效或高延迟的问题,严重影响系统的稳定性和安全性。

为了克服这些挑战,清华大学精密仪器系类脑计算研究团队聚焦类脑视觉感知芯片技术,提出了一种基于视觉原语的互补双通路类脑视觉感知新范式。该范式借鉴了人类视觉系统的基本原理,将开放世界的视觉信息拆解为基于视觉原语的信息表示,并通过有机组合这些原语,模仿人视觉系统的特征,形成两条优势互补、信息完备的视觉感知通路。

基于这一新范式,团队进一步研制出了世界首款类脑互补视觉芯片“天眸芯”,在极低的带宽和功耗代价下,实现了每秒10000帧的高速、10比特的高精度、130分贝的高动态范围的视觉信息采集,不仅突破了传统视觉感知范式的性能瓶颈,而且能够高效应对各种极端场景,确保系统的稳定性和安全性。

基于“天眸芯”,团队还自主研发了高性能软件和算法,并在开放环境车载平台上进行了性能验证。在多种极端场景下,该系统实现了低延迟、高性能的实时感知推理,展现了其在智能无人系统领域的巨大应用潜力。

研究团队表示,“天眸芯”的成功研制为自动驾驶、具身智能等重要应用开辟了新的道路。结合团队在类脑计算芯片“天机芯”、类脑软件工具链和类脑机器人等方面已应用落地的技术积累,“天眸芯”的加入将进一步完善类脑智能生态,推动人工通用智能的发展。

相关内容

热门资讯

黑科技AI(WpK)外挂透明挂... 黑科技AI(WpK)外挂透明挂黑科技辅助插件(透视)AI教程(2023已更新)(哔哩哔哩)1、WpK...
8分钟了解!wepoke软件透... 8分钟了解!wepoke软件透明演示,微信小程序旺旺麻将有插件吗,软件教程(有挂功能)-哔哩哔哩亲,...
黑科技透视(wepoker)外... 黑科技透视(wepoker)外挂透明挂黑科技辅助工具(透视)wpk教程(2020已更新)(哔哩哔哩)...
第6分钟了解!wepoke透明... 第6分钟了解!wepoke透明挂软件,多乐保皇辅助器ios版本,2025新版教程(有挂工具)-哔哩哔...
黑科技功能(德扑ai)外挂透明... 黑科技功能(德扑ai)外挂透明挂黑科技辅助软件(透视)必备教程(2025已更新)(哔哩哔哩);德扑a...
6分钟了解!德扑ai智能机器人... 6分钟了解!德扑ai智能机器人,陕西麻将助赢软件,系统教程(有挂透明挂)-哔哩哔哩1)陕西麻将助赢软...
黑科技软件(智星德州)外挂透明... 黑科技软件(智星德州)外挂透明挂黑科技辅助工具(透视)解密教程(2026已更新)(哔哩哔哩);一、智...
第4分钟了解!微扑克辅助手机,... 第4分钟了解!微扑克辅助手机,易棋游戏外挂,解密教程(有挂教学)-哔哩哔哩;1、操作简单,无需注册,...
黑科技透明挂(鱼扑克app俱乐... 自定义鱼扑克app俱乐部系统规律,只需要输入自己想要的开挂功能,一键便可以生成出微扑克专用辅助器,不...
第7分钟了解!wepoke透明... 第7分钟了解!wepoke透明挂辅助,麻友圈2怎么控制输赢,技巧教程(有挂头条)-哔哩哔哩麻友圈2怎...