麻省理工学院帮助自动驾驶汽车看清周围角落
2019/11/05 14:59AI云资讯11400

图片来源:麻省理工学院
研究人员在论文中描述了自动驾驶汽车在停车场成功行驶的实验。当探测到有车辆驶近并停车时,此种基于车辆的系统比传统只能探测到可见物体的激光雷达要快半秒。目前,该系统仅在室内环境下进行了测试。机器人在室内的速度要慢得多,照明条件也更一致,因此系统更容易感知和分析阴影。
扩展ShadowCam
研究人员构建了名为ShadowCam(阴影摄像头)的系统,使用计算机视觉技术,检测和分类地面阴影的变化。此前,麻省理工学院教授William Freeman和Antonio Torralba合作开发了该系统的较早版本。
ShadowCam使用摄像头的视频帧序列,瞄准特定的区域,例如角落前方的地面。该系统可以根据多幅图像,检测光线强度随时间的变化,这些变化可能表明有物体正远离或靠近。其中一些变化肉眼可能很难检测到,但是可以由对象和环境的各种属性来确定。ShadowCam计算这些信息,并将图像进行分类,分别为包含静止物体的图片,或包含动态的、移动的物体的图片。如果是动态图像,该系统就会做出相应的反应。
将ShadowCam应用到自动驾驶汽车上需要一些进展。例如,早期的版本利用增强现实标签AprilTags,类似于简化的二维码,将区域进行排列。机器人扫描AprilTags,检测并计算它们相对于标签的精确3D位置和方向。ShadowCam使用标签作为环境特征,瞄准可能包含阴影的特定像素块。但是利用AprilTags修改现实环境是不现实的。
研究人员开发了新方法,结合了图像配准和新的视觉测程技术。图像配准通常用于计算机视觉,本质上是对多个图像进行标注,以显示图像中的变化。
视觉测程技术通过分析图像序列中的姿态和几何图形,实时估计摄像头的运动。研究人员特别采用直接稀疏测程法(DSO),可以在类似AprilTags捕获的环境中计算特征点。本质上,DSO在3D点云上绘制环境特征,然后计算机视觉管道只选择位于兴趣区域的特征,例如角落附近的地板。(事先手动标注兴趣区域。)
由于ShadowCam获取兴趣区域的输入图像序列,因此使用的是DSO图像配准方法,标注机器人相同视点的所有图像。即使机器人移动时,也能够瞄准阴影处的像素点,帮助检测图像之间的细微偏差。
接下来是信号放大。可能包含阴影的像素颜色加深,会降低信噪比。这使得阴影变化的极其微弱的信号更容易被探测到。增强信号部分取决于它与附近其他阴影的偏离程度,如果达到某个阈值,ShadowCam会将该图像归类为动态图像。根据信号的强度,系统可能会告诉机器人减速或停止。研究人员表示,“如果检测到该信号,你就必须小心了。它可能是从角落后面跑出来的人的影子,或者是一辆停着的车的影子,所以自动驾驶汽车会减速或者完全停下来。”
无标签测试
在一项测试中,研究人员使用AprilTags和基于DSO的新方法评估了该系统对移动或静止的物体进行分类的性能。这两种方法的分类准确率都达到了70%,表明不再需要AprilTags。
在另一项测试中,研究人员在停车场中的一辆自动驾驶汽车上安装ShadowCam,关闭大灯,模拟夜间驾驶条件,并与激光雷达比较车辆检测时间。在一个示例场景中,ShadowCam检测到柱子后面驶来的车辆的速度比激光雷达大约快0.72秒。此外,由于研究人员特别根据车库照明条件,对ShadowCam进行调整,使其分类准确率达到86%左右。
下一步,研究人员将进一步开发该系统,以确保其可在不同的室内和室外照明条件下工作。未来,可能会有方法加速系统的阴影检测速度,实现目标区域标注过程的自动化。
相关文章
- DeepWay深向亮相中国—东盟自动驾驶汽车合作能力建设活动,分享RoboTruck运营实践与出海前景
- 文远知行全球保险合作计划启动:定制化保险方案覆盖自动驾驶运营全生命周期
- 玩美案例丨玩美数据解读:自动驾驶从“能用”到“好用”的三个关键指标
- ECCV自动驾驶研讨会唯一中国企业参与组织,元戎启行共建AI安全议题
- 获西班牙官方L4牌照,文远知行Robotaxi拿下欧盟首个国家级自动驾驶许可
- 文远知行获西班牙首张L4级自动驾驶乘用车运营牌照,Robotaxi商业化服务年内上线
- 腾讯云与卡尔动力达成战略合作,AI助力L4级自动驾驶模型迭代
- 中国Robotaxi首入北欧!文远知行布局丹麦首个商业化自动驾驶共享出行项目
- 自动驾驶地图快速审查平台落地在即 四维图新期待携手同行
- 斯年智驾完成3亿元C轮融资,加速车规级自动驾驶重卡全域落地
- 苹果自动驾驶项目折戟,却自研出高性能 AI 芯片
- 中原工学院加入“星火计划”:携手百度Apollo共建自动驾驶产学研用繁荣生态
- 以“车路运能”聚势,千方科技自动驾驶干线物流业务稳步推进
- 比亚迪重磅发布中国首款4nm制程智驾芯片 布局高等级自动驾驶
- 深耕欧洲自动驾驶商业化 文远知行连续三年服务法国网球公开赛
- 千方科技:聚焦自动驾驶物流运营,子公司千曙科技与世盟物流签署合作协议









