美国研究人员利用反射进行成像 可应用于自动驾驶汽车_全球简讯

2023-05-13 08:42:56 来源:盖世汽车

盖世汽车讯 当一辆汽车在狭窄的城市街道上行驶时,路边停放汽车的光泽漆面或后视镜的反射可以帮助驾驶员看到原本隐藏在视线里的东西,如看到一个孩子在停放汽车后面的人行道上玩耍。

新型计算机视觉技术,利用反射将有光泽的物体变成“摄像头”(图片来源:MIT)

据外媒报道,基于上述情形,美国麻省理工学院(MIT)与莱斯大学(Rice University)的研究人员打造了一种利用反射成像的计算机视觉技术。他们的方法是利用反射将有光泽的物体变为“摄像头”,让用户可以看到世界,就好像通过陶瓷咖啡杯或金属纸镇等日常物品的“镜头”观看世界一样。


(资料图)

利用从不同角度拍摄的物体图像,该技术将物体表面转变成可以捕捉反射的虚拟传感器。该人工智能(AI)系统以某种方式映射此类反射,使其能够估计场景的深度,并捕捉只能从物体角度看到的新视图。人们可采用此种方式看到周围的角落或者障碍物之外的视野。

此种方法对于自动驾驶汽车而言尤其有用。例如,其可让自动驾驶汽车利用经过的物体(如路灯或建筑物)的反射来观察停放的卡车周围的情况。

罪案电视节目中的主人公经常把监控录像“放大,增强(细节)”来捕捉反射,也许是从犯罪嫌疑人的太阳镜中捕捉反射画面,从而帮助破案。

研究人员表示:“在现实生活中,利用这些反射画面不像按一个增强按钮那么简单。从反射中得到有用的信息很难,因为反射会提供一个扭曲的视图。”

此种扭曲取决于物体的形状以及物体所反射的世界,而研究人员对这两者都没有完整的信息。此外,有光泽的物体在反射时会混杂自己的颜色和纹理。另外,反射是对三维世界的二维投影,因此很难判断反射场景的深度。

研究人员找到了克服此类挑战的方法,该技术称为ORCa(物体作为辐射场摄像头),工作分为三个步骤。首先,可以从很多有利位置拍摄物体照片,捕捉有光泽的物体上的多重反射。

然后,对于来自真正摄像头的每张照片,ORCa技术利用机器学习将物体表面变为虚拟传感器,捕捉物体表面每个虚拟像素的光线和反射。最后,系统利用物体表面的虚拟像素从物体的角度对三维环境进行建模。

从多个角度对物体成像让ORCa能够捕获多个视点的反射,让该系统除了利用此类反射估算场景中有光泽的物体与其他物体之间的深度,还能估判该物体的形状。ORCa将场景建模为5D辐射场,捕获从场景中每个点发出并击中场景中每个点的光线的强度和方向。

该5D辐射场中包含的额外信息也有助于ORCa准确地估计深度,而且由于该场景展现为5D辐射场而非2D图像,用户可以看到被角落或障碍物阻挡的隐藏物体特征。

事实上,一旦ORCa捕捉到该5D辐射场,用户就能够在场景的任意地方放置一个虚拟摄像头,并合成该摄像头将看到的东西。用户还可以将虚拟物体插入到环境中,或者改变陶瓷、金属等物体的外观。

研究人员通过将其与其他模拟反射的方法(与ORCa执行的任务略有不同)进行比较,以评估该技术。他们的方法在反射中分离出物体的真实颜色方面表现良好,并且在提取更精确的物体几何形状和纹理方面优于基准。

研究人员将系统的深度估计与场景中物体之间实际距离的模拟真实数据进行了比较,发现ORCa的预测十分可靠。

基于该概念验证,研究人员希望将该技术应用于无人机成像。ORCa可以利用无人机飞过物体的微弱反射,重建地面上的场景。研究人员还想提升ORCa技术,让其可以利用阴影等线索,来重建隐藏的信息,或者结合两个物体的反射内容,对场景中的新部分进行成像。

标签:

美国研究人员利用反射进行成像 可应用于自动驾驶汽车_全球简讯

2023-05-13

英媒炒作“中国经济见顶”,专家:不必放心上,做好自己事最重要 世界时快讯

2023-05-13

爱普生打印机红灯双闪怎么回事 爱普生打印机红灯双闪 天天最新

2023-05-13

一支守护航天员进出太空的“南丁格尔”队伍

2023-05-13

vivo手机nfc功能怎么打开_vivo手机nfc功能怎么打开

2023-05-13

世界看热讯:林园“踩雷”传闻追踪:大佬还是那个大佬么?

2023-05-12

圣灵降临的目的是什么_圣灵降临节_全球短讯

2023-05-12

3090显卡大概多少钱 当前最新

2023-05-12

当前焦点!华东理工大学商学院与上海现代服务业联合会品牌专委会开启战略合作

2023-05-12

全球观热点:住建部:我国全面启动城市基础设施生命线安全工程

2023-05-12

第一份人类“泛基因组”草图发布

2023-05-12

下司犬的抖音唯美说说(回忆那不该回忆的回忆。)(下司犬的优点) 最新快讯

2023-05-12

都美竹最新采访状态糟糕,面部僵硬红肿,被吐槽没主持人好看

2023-05-12

罗马诺:如果收到不错的报价,门迪可能今夏离开切尔西|焦点报道

2023-05-12

每日焦点!琼林醉归图_关于琼林醉归图介绍

2023-05-12

通配符怎么替换? 批处理高效办公,Word查找替换通配符不会用怎么行

2023-05-12

【天天快播报】首创集团:首创和园在北京已有8宗项目,超12800套保障房

2023-05-12

天天新消息丨交通部公布新修订道路运输车辆技术管理规定

2023-05-12

立讯精密于昆山投资设立新公司 注册资本10亿元|全球速看

2023-05-12

当前速看:何首乌怎么吃_何首乌的最佳吃法

2023-05-11

情人节的苦恼_情人节自讨苦吃-全球播资讯

2023-05-11

每日速读!中泰合资生产的高端纯电动车投放泰国市场

2023-05-11

迪士尼宣布将Disney+与Hulu合并为一个新APP

2023-05-11

乘联会:5月1-7日乘用车市场零售37.5万辆同比增长67%

2023-05-11

进度停滞,贵阳征收项目的现状

2023-05-11

快播:上海期货交易所期镍仓单日报(2023年05月11日)

2023-05-11

小森生活土豆怎么获得 小森生活土豆获取及土豆泥制作方法

2023-05-11

市场消息:意大利竞争机构对苹果展开调查。 环球新动态

2023-05-11

华尔街大佬致信耶伦,敦促尽快解决债务上限问题,金价周线有望三连阳_环球观焦点

2023-05-11

面对暴雨洪水,如何科学自救?专家详解

2023-05-11

Copyright ©  2015-2022 亚洲频道网版权所有  备案号:豫ICP备20022870号-9   联系邮箱:553 138 779@qq.com