卡内基梅隆大学和布法罗大学的研究人员推出数据引擎Map It Anywhere (MIA) ,它能够利用大规模的公共数据来增强从第一人称视角(FPV)图像预测鸟瞰图(BEV)地图的能力。简单来说,MIA能够帮助我们从人们日常拍摄的街景照片中自动创建出用于导航的地图。
- 项目主页:https://mapitanywhere.github.io
- GitHub:https://github.com/MapItAnywhere/MapItAnywhere
- 数据引擎Demo:https://mapitanywhere-dataengine.hf.space
- 地图预测Demo:https://mapitanywhere-mapper.hf.space
例如,你在城市中漫步,随手拍下了沿途的风景。MIA能够利用这些照片,自动生成一种从天空俯瞰地面的地图,这对于自动驾驶汽车、机器人导航等技术来说非常有用。它不仅能理解照片中的内容,比如道路、人行道、建筑物等,还能把这些信息转换成一种适合导航使用的格式。
主要功能:
- 从大规模众包平台(如Mapillary和OpenStreetMap)自动收集和处理数据。
- 将第一人称视角的街景图片转换成鸟瞰图视角的语义地图。
主要特点:
- 大规模数据利用:MIA使用了1.2百万对高质量的FPV图像和BEV地图对,覆盖了470平方公里的区域。
- 自动化处理:MIA能够自动地从众包数据中筛选和处理图像,减少了人工标注的需求。
- 高泛化能力:使用MIA训练的模型在未见过的城市和现有基准测试中展现出更好的泛化性能。
工作原理:
- 数据收集:MIA从Mapillary平台收集FPV图像,从OpenStreetMap获取BEV地图数据。
- 图像处理:MIA使用一系列自动化的筛选流程,包括时间过滤、相机模型过滤、位置和角度差异过滤等,以确保图像质量。
- 地图生成:MIA将筛选后的FPV图像与BEV地图数据相结合,通过深度学习模型来预测语义地图。
具体应用场景:
- 自动驾驶:自动驾驶汽车可以使用MIA生成的地图进行精确的路径规划和导航。
- 机器人导航:在复杂环境中,比如工业园区或大型仓库,机器人可以利用MIA的地图进行导航。
- 城市规划:城市规划者可以利用MIA的地图来分析城市布局,进行交通规划和基础设施建设。
总的来说,MIA通过利用众包数据,为自动生成适用于导航的地图提供了一种高效、自动化的解决方案,这对于需要精确地图信息的各种应用场景都是有益的。
0条评论