• 我的订阅
  • 科技

聚焦无人驾驶 中外团队分别研发出视觉芯片和混合相机

类别:科技 发布时间:2024-05-30 20:25:00 来源:每日看点快看

本文转自:中国新闻网

中新网北京5月30日电 (记者 孙自法)国际著名学术期刊《自然》最新同步发表中外两个研究团队独立完成的两篇物理学论文,聚焦无人驾驶,他们通过两种提升图像处理的方法,分别研发出“天眸”视觉芯片和混合相机,或能用于自动驾驶汽车。

据介绍,图像传感器对自动化机器在内的各种应用至为重要,需要兼具良好的整体视觉质量(对场景的准确解读)以及快速运动探测(实现快速反应)。不过,整合各种理想功能可能会影响效率或是需要在图像质量和延迟上做出取舍。而最新发表的两项研究,证明了混合方法能在克服之前局限的同时满足这两种需要。

在第一篇论文中,论文共同通讯作者、清华大学施路平领导的中国科研团队以人类视觉系统的运作方式为灵感,开发出一款传感芯片,能将快速但不精确的感觉与慢速但更精确的知觉相结合。这个视觉芯片被命名为“天眸”(Tianmouc),它有一个混合像素阵列,能将低准确度但快速的事件探测(无需太多细节便可对变化做出快速反应)与慢速处理相结合,实现对场景的准确可视化。

研究团队用一个自动驾驶感知系统证明了该芯片能快速稳健处理图像的能力。该芯片还在多个情景进行了测试,包括开车经过一个黑暗隧道,应对相机闪光灯的干扰,以及探测汽车前方有人走过。

聚焦无人驾驶 中外团队分别研发出视觉芯片和混合相机

本项研究的图片同时显示了彩色摄像头的颜色信息和事件摄像头的事件(蓝点和红点);边界框显示了他们的算法对行人的检测(图片来自苏黎世大学机器人与感知小组)。施普林格·自然/供图

在另一篇论文中,瑞士苏黎世大学Daniel Gehrig和Davide Scaramuzza用视觉感知专用相机克服了存在的困难:全彩相机分辨率很高但需要大量数据处理(带宽)来探测快速变化;降低带宽会导致延迟增加,从而会影响安全性。而事件相机虽然能探测快速的移动,但会牺牲准确度。

聚焦无人驾驶 中外团队分别研发出视觉芯片和混合相机

本项研究的图片显示了彩色摄像头的颜色信息和事件摄像头的事件(蓝点和红点);边界框显示了他们的算法对汽车的检测(图片来自苏黎世大学机器人与感知小组)。施普林格·自然/供图

他们的研究表明,有一种混合系统能让自动驾驶汽车实现稳健的低延迟目标探测。通过结合这两种相机,彩色相机的帧率会降低,从而在确保准确性的同时降低带宽、提升效率,而事件相机也能弥补彩色相机造成的高延迟,确保能探测到快速移动的目标,如行人和汽车。

聚焦无人驾驶 中外团队分别研发出视觉芯片和混合相机

本项研究的图片显示了行人奔跑时产生的来自彩色摄像头的颜色信息和来自事件摄像头(蓝点和红点)的事件(图片来自苏黎世大学机器人与感知小组)。施普林格·自然/供图

《自然》论文认为,中国和瑞士团队最新研究的这两种方法,或能让自动驾驶汽车和其他应用实现更快、更高效和稳健的图像处理。(完)

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-05-30 23:45:08

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

动微视觉获千万级天使轮融资,专注媲美人类的视觉解决方案|硬氪首发
...外轮廓,且缺乏独立的数据库匹配轮廓信息。缺少合适的芯片和算法,是仿生视觉传感器规模化落地应用的难点。 EPP智能相机是动微视觉研发的全球首款专门针对仿生类眼传感器设计的智能硬
2023-12-04 13:41:00
计算机视觉AI芯片公司肇观电子获2亿元D轮融资,让所有智能设备看懂世界|硬氪独家
...,由华山资本领投,本轮融资资金将用于肇观电子下一代芯片和模组的研发和迭代。肇观电子于2016年在上海成立,聚焦计算机视觉和AI端侧芯片及模组研发,服务工业、机器人、汽车、消费
2023-12-05 11:53:00
清华「天眸芯」登Nature封面:全球首款类脑互补视觉芯片
...变化、夜间强闪光干扰等。在这类任务上,传统视觉感知芯片由于受到「功耗墙」和「带宽墙」的限制,往往面临失真、失效或高延迟的问题,严重影响系统的稳定性和安全性。为了克服这些挑战,
2024-05-30 17:05:00
追光者:国产超亿像素图像传感器厂商威派视半导体
...理马浩文博士感叹到。依据最新数据显示,全球CMOS成像芯片市场规模由2017年的139.05亿美元增长至2022年的233
2024-02-18 13:00:00
华为P70系列相机配置曝光:配备长焦潜望镜,首发玻塑混合镜头
...预计将在市场上获得广泛的认可。此外,华为在自主研发芯片方面也取得了重大突破。其自主研发的麒麟芯片在性能和功耗方面都表现优异,使得华为手机在硬件上也具备了强大的竞争力。结合此次
2023-12-06 15:28:00
泉果基金调研奥比中光
...感知技术体系,在技术纵深上融合了光学、机械、电子、芯片设计、算法、SDK、固件开发等多项复杂学科交叉技术,在技术横向跨度上涵盖结构光、iToF、dToF、双目、Lidar、工
2024-12-13 13:46:00
36氪首发 | 「维悟光子」获得真格基金超千万元的天使轮融资,专注被动单目3D视觉感知技术
...构光方案需使用昂贵的激光发射器,器件成本较高;SPAD芯片又限制了ToF分辨率的提升,同时造成发热严重等问题;结构光和双目方案则受其成像原理的基线限制,模组体积无法减小,且对
2023-02-27 12:15:00
别只盯着宝马冰激淋,自动驾驶要变天了
...ity Driving Max。这套自动驾驶系统,搭载了两颗英伟达Orin X芯片,算力为508TOPS,2颗视距为180米的高线束激光雷达
2023-04-21 14:10:00
首个混合现实设备Apple Vision Pro发布:内置M2+R1芯片
...e Vision Pro,提供无边际画布和3D交互体验,内置M2和R1两颗芯片,并搭载visionOS操作系统,售价约25000元起
2023-06-06 11:59:00
更多关于科技的资讯: