聚焦无人驾驶 中外团队分别研发出视觉芯片和混合相机
创始人
2024-05-30 21:01:31
0

中新网北京5月30日电 (记者 孙自法)国际著名学术期刊《自然》最新同步发表中外两个研究团队独立完成的两篇物理学论文,聚焦无人驾驶,他们通过两种提升图像处理的方法,分别研发出“天眸”视觉芯片和混合相机,或能用于自动驾驶汽车。

据介绍,图像传感器对自动化机器在内的各种应用至为重要,需要兼具良好的整体视觉质量(对场景的准确解读)以及快速运动探测(实现快速反应)。不过,整合各种理想功能可能会影响效率或是需要在图像质量和延迟上做出取舍。而最新发表的两项研究,证明了混合方法能在克服之前局限的同时满足这两种需要。

在第一篇论文中,论文共同通讯作者、清华大学施路平领导的中国科研团队以人类视觉系统的运作方式为灵感,开发出一款传感芯片,能将快速但不精确的感觉与慢速但更精确的知觉相结合。这个视觉芯片被命名为“天眸”(Tianmouc),它有一个混合像素阵列,能将低准确度但快速的事件探测(无需太多细节便可对变化做出快速反应)与慢速处理相结合,实现对场景的准确可视化。

研究团队用一个自动驾驶感知系统证明了该芯片能快速稳健处理图像的能力。该芯片还在多个情景进行了测试,包括开车经过一个黑暗隧道,应对相机闪光灯的干扰,以及探测汽车前方有人走过。

本项研究的图片同时显示了彩色摄像头的颜色信息和事件摄像头的事件(蓝点和红点);边界框显示了他们的算法对行人的检测(图片来自苏黎世大学机器人与感知小组)。施普林格·自然/供图

在另一篇论文中,瑞士苏黎世大学Daniel Gehrig和Davide Scaramuzza用视觉感知专用相机克服了存在的困难:全彩相机分辨率很高但需要大量数据处理(带宽)来探测快速变化;降低带宽会导致延迟增加,从而会影响安全性。而事件相机虽然能探测快速的移动,但会牺牲准确度。

本项研究的图片显示了彩色摄像头的颜色信息和事件摄像头的事件(蓝点和红点);边界框显示了他们的算法对汽车的检测(图片来自苏黎世大学机器人与感知小组)。施普林格·自然/供图

他们的研究表明,有一种混合系统能让自动驾驶汽车实现稳健的低延迟目标探测。通过结合这两种相机,彩色相机的帧率会降低,从而在确保准确性的同时降低带宽、提升效率,而事件相机也能弥补彩色相机造成的高延迟,确保能探测到快速移动的目标,如行人和汽车。

本项研究的图片显示了行人奔跑时产生的来自彩色摄像头的颜色信息和来自事件摄像头(蓝点和红点)的事件(图片来自苏黎世大学机器人与感知小组)。施普林格·自然/供图

《自然》论文认为,中国和瑞士团队最新研究的这两种方法,或能让自动驾驶汽车和其他应用实现更快、更高效和稳健的图像处理。(完)

相关内容

热门资讯

太原康恒取得沟道照明设备专利,... 国家知识产权局信息显示,太原康恒再生能源有限公司取得一项名为“沟道照明设备”的专利,授权公告号CN2...
原创 除... 世界第一份来自月球背面的月壤,除了中国之外,第一个获得嫦娥六号月球背面月壤的国家来了,其1935.3...
麦捷科技(300319)新增【... 证券之星消息,根据市场公开信息整理,6月9日麦捷科技(300319)新增【机器人】概念。 新增概念原...
云端“织”网,标识解析锚定工业... 在太重集团榆次液压工业有限公司的生产车间内,质检员对着液压件包装上的二维码轻轻一扫,手机屏幕上立刻跳...
中高端游戏手机性价比推荐,联想... 中高端游戏手机通常指2500-4000元价位段。在这个区间,红米K90 Max卖2999,iQoo ...
Kimi预测世界杯这事,大部分... 又是一年盛夏。 高考刚刚开始,一群“AI做题家”们又猝不及防地冒了出来。让不同的AI模型参加高考,然...
“钉内”到底发生了什么 还记得去年8月,“大厂CEO凌晨查岗”的新闻吗?当时,多位自称钉钉员工的用户发文表示,CEO无招(陈...
假如福建非遗会发“朋友圈” 如果福建非遗会发“朋友圈”,是什么画风? 泉州南音慢悠悠唱着千年古韵;德化白瓷晒出“月光捏成”的东方...
原创 粟... 众所周知,粟裕是一位天才的军事将领,他凭借过人的智慧和果敢,创造了无数令人惊叹的战役。然而,他那耿直...
原创 银... 00 读者群银行安全性的聊天记录 前文《投资渠道那么多,该怎么选,看博士的投资理财方案(初级)》,说...