MIT 发明“雾中看车”新成像系统,雾天自动驾驶表现比人类更好

简介: 麻省理工学院媒体实验室的研究人员开发了一种新的成像系统,利用SPAD相机和新的算法,可以测量被雾遮挡的物体的距离。在实验中,该系统的表现比人类的视觉更好,这对于自动驾驶汽车来说是一个巨大的突破。

麻省理工学院媒体实验室的研究人员开发了一种新的成像系统,可以测量被雾遮挡的物体的距离,而人的视线很难看穿雾气。

95d9155e40d87eea36e8d6a2c2b2bfdf83ad93ba

他们的目标是将该技术整合到自动驾驶汽车中,这样,即使在恶劣天气下,车辆也能避开障碍物。

这个成像传感系统使用SPAD(单光子雪崩二极管)相机,可以向物体发射短时激光脉冲,然后计算光线反弹需要多长时间。雾通常会散射激光,这使得自动驾驶车辆在雾天难以驾驶。

但研究人员开发了一种算法,可以在散射光中找到模式,以计算出距离。他们发现,无论雾有多厚,散射激光的到达时间总是遵循一个非常具体的分布模式。摄像机会计算每万亿分之一秒回到传感器的光子数量,当这些结果绘制成图时,系统可以应用特定的数学滤波器来揭示数据尖峰,从而揭示隐藏在雾中的实际物体。

他们提出的方法是基于估计雾特性(背景)的概率算法,然后从测量结果中减去背景,使用目标反射率和深度来恢复目标的信号光子。

5eb37f93b75288526b54bdd0d256967e71d742c8

算法概述

他们提出的模型支持多种雾密度,并且能够在不均匀和动态的雾中工作。雾模型直接根据测量结果进行估计,而无需先验知识。

fd4db3ba221caf56ae1639414ecc3f9b89d38c4b

Source: Guy Satat, MIT Media Lab's Camera Culture Group

应用场景:

8481c8f592b7f349aa84a1de5c171db681516edf 在充满挑战的天气中进行自主驾驶或辅助驾驶。
8481c8f592b7f349aa84a1de5c171db681516edf 飞机和直升机在浓雾环境中起飞、着陆和低空飞行。
8481c8f592b7f349aa84a1de5c171db681516edf 列车在恶劣天气条件下以正常速度行驶。

在MIT媒体实验室的Camera Culture团队,研究人员在实验环境测试了该系统,其中的雾比现实世界中汽车所面临的雾更浓密。该系统比人类的视觉表现更好,而大多数成像系统的表现更差。与人类驾驶员处理雾气一样好的导航系统,对于自动驾驶汽车来说是一个巨大的突破。


原文发布时间为:2018-04-2

本文作者:肖琴

本文来自云栖社区合作伙伴新智元,了解相关信息可以关注“AI_era”微信公众号

原文链接:MIT 发明“雾中看车”新成像系统,雾天自动驾驶表现比人类更好

相关文章
|
Unix Linux 文件存储
文件传输、文件挂载MOUNT:NFS、CIFS、ADB、SAMBA
文件传输、文件挂载MOUNT:NFS、CIFS、ADB、SAMBA
882 0
MMEditing | 新视频超分算法冠军BasicVSR++来了
视频复原任务 (Video Restoration) 。它除了可以提高用户体验外, 还可以提高检测和分割等任务的准确度。其难点在于需要从高度相关但未对齐的视频帧中收集补充信息以进行恢复,在循环模型中跨帧传输长时信息和对齐特征的问题仍然是一个很艰巨的任务。
1287 0
MMEditing | 新视频超分算法冠军BasicVSR++来了
|
5月前
|
安全 网络安全 iOS开发
打印机在win10系统和win7系统或同个系统,共享打印机,一键设置打印机共享软件推荐
这是一款全网首发的“一键共享打印机”软件,操作简单,功能高效,支持多种系统设置共享。软件可能因修改系统设置被误报木马,但可放心使用。提供修复连接错误功能,并附详细安装教程和图文指引。
379 5
|
人工智能 测试技术 开发者
北大李戈团队提出大模型单测生成新方法,显著提升代码测试覆盖率
【9月更文挑战第27天】北京大学李戈团队在人工智能领域取得重要突破,提出HITS新方法,通过将待测方法分解为多个切片并利用大型语言模型逐个生成测试用例,显著提升代码测试覆盖率,尤其在处理复杂方法时效果显著,为软件开发和测试领域带来新希望。尽管存在一定局限性,HITS仍展示了巨大潜力,未来有望克服限制,推动软件测试领域的创新发展。论文详情见【https://www.arxiv.org/pdf/2408.11324】。
615 6
pdf文件转化为png照片 (PyMuPDF下面的fitz)
pdf文件转化为png照片 (PyMuPDF下面的fitz)
|
机器学习/深度学习 语音技术 算法框架/工具
|
缓存 语音技术 UED
|
机器学习/深度学习 编解码
【论文笔记】图像修复MPRNet:Multi-Stage Progressive Image Restoration 含代码解析2
【论文笔记】图像修复MPRNet:Multi-Stage Progressive Image Restoration 含代码解析
679 2
|
编解码 算法 PyTorch
超好用!图像去雾算法C2PNet介绍与使用指南
超好用!图像去雾算法C2PNet介绍与使用指南
|
存储 网络协议 算法
站在程序猿的角度理解:UDP 协议
哈喽,大家好~我是你们的老朋友:保护小周ღ,本期为大家带来的是 网络基础原理中的 UDP 协议,从什么协议?,认识 UDP 协议,UDP 的报文格式,UDP 传输大文件时的策略,以及 UDP 协议的工作流程这几个方面讲解,咱们程序猿不会网络知识是不行的,确定不来看看嘛~~ 更多精彩敬请期待:保护小周ღ *★,°*:.☆( ̄▽ ̄)/$:*.°★* ‘
501 0