清华大学交叉信息研究院助理教授赵行:以视觉为主的自动驾驶高精度语义地图感知 | 自动驾驶新青年讲座05

「自动驾驶新青年讲座」由智东西公开课全新企划,将邀请全球知名高校、顶尖研究机构以及优秀企业的新青年,主讲在环境感知、精准定位、决策规划、控制执行等自动驾驶关键技术上的最新研究成果和开发实践。

有兴趣分享的朋友,可以与智东西公开课教研团队进行邮件(class@zhidx.com)联系。

高精度地图(HD maps)是自动驾驶中的一个重要模块。高精度地图包含道路厘米级的几何和语义信息,包括车道线,道路边界以及道路的拓扑结构。高精度地图可以使自动驾驶车辆更准确地定位,预测其他运动物体,在传感器之外进行规划。

然而,传统的使用算法预标注和人工标注的高精度地图生成框架面临着许多挑战。首先,高精度地图所需原始点云由车载的移动测绘系统收集,其中配备激光雷达、GPS、IMU、车轮里程计等传感器,所有传感器需要精确的校准和维护,可扩展性较差。其次,同一场景的多片点云需要使用SLAM进行融合,以保证场景高精度,高密度的点云表达。SLAM算法产生的微小错误会造成高精度地图的错位。此外,融合后的点云需要由算法预标注和人工标注道路的几何形状、语义标签、可驾驶区域等标签信息。预标注以及人工标注都需要花费大量的资源和人工成本。最后,道路信息是经常变化的,为了满足长期使用,必须不断更新维护高精度地图。

为此,清华大学交叉信息研究院助理教授赵行等人提出了一种在线地图学习框架HDMapNet,利用车载传感器即时预测周边地图信息。这样的框架不需要更新或维护本地高精度地图,更易实现,可扩展性更强。HDMapNet将车载传感器获取的图片或点云作为输入,输出矢量化的地图元素,包括车道线、道路边界、人行道、斑马线。同时,文章提出使用语义层面和实例层面的指标来评估构建出的地图的性能。

同时,针对现有方法通过离线手动标注来解决语义构图的可扩展性问题。赵行教授还提出了一个端到端矢量化高精地图学习框架VectorMapNet。

VectorMapNet获取车载传感器观测数据,并在鸟瞰图(BEV)中预测一组稀疏的多段线(polylines)原素,以模拟高清地图的几何结构。基于此,VectorMapNet可以显式地建模地图元素之间的空间关系,并生成对下游自主驾驶任务友好的矢量化地图,而无需进行后处理。在实验中,VectorMapNet在nuScenes数据集上实现了强大的高清地图学习性能,mAP超过了以前最好方法14.2。定性上,VectorMapNet能够生成全面的地图,并捕获道路几何中更细粒度的细节。

8月8日晚7点,「自动驾驶新青年讲座」第5讲,清华大学交叉信息研究院助理教授赵行将主讲《以视觉为主的自动驾驶高精度语义地图感知》。

讲者
赵行,清华大学交叉信息研究院助理教授,博士生导师;博士毕业于麻省理工学院MIT,后于谷歌无人车项目Waymo担任研究科学家;研究涵盖自动驾驶,以及多模态机器学习;他提出了自动驾驶感知和预测中一系列框架型的工作,为行业大多数公司所使用或借鉴;研究工作曾被多家主流科技媒体报道,如BBC, NBC, 麻省理工科技评论等;曾获2015年ICCP最佳论文奖,本人入选2020年福布斯中国U30科学精英榜。

第5讲

主 题
《以视觉为主的自动驾驶高精度语义地图感知》

提 纲
1、自动驾驶高精度地图的应用
2、在线高精度语义地图的构建和评估方法HDMapNet
3、VectorMapNet:端到端的矢量化高精度语义地图感知

直 播 信 息
直播时间:8月8日19:00
直播地点:智东西公开课知识店铺

开源链接

HDMapNet/VectorMapNet
《HDMapNet: An Online HD Map Construction and Evaluation Framework》
《VectorMapNet: End-to-end Vectorized HD Map Learning》

论文地址
https://arxiv.org/pdf/2107.06307.pdf
https://arxiv.org/pdf/2206.08920.pdf

开源地址
https://github.com/Tsinghua-MARS-Lab/HDMapNet
https://github.com/Mrmoore98/VectorMapNet_code