CVPR 2025|突破自动驾驶"交规困境":高德车道级交通规则在线理解,让AI更懂交规!

2025-05-09 13:07:52 围观 : 258 次 0 评论

作为专业领先的出行和位置服务提供商,高德地图以数据准确率高、鲜度高著称。当前自动驾驶技术总是关注到矢量地图的构建,往往忽略了车道级驾驶规则的制作。对应图商而言,车道级的领航不仅需要有正确的车道级矢量表达,还要明确每条路的驾驶规则,保证引导的准确率。

高德认为,遵守交通规则行驶是实现自动驾驶系统的必要条件,车道级交通规则通常包含在高精地图中,为自动驾驶系统提供了准确、可靠的规则指导。受限于高精地图的更新频率低、更新成本高的局限,当前自动驾驶系统朝向 “在线感知建图” 的方向发展。而目前的在线建图方法主要关注于车道线、道路拓扑等道路结构的感知,忽视了对于包含更多语义信息的交通规则的理解,这一局限使自动驾驶系统仍然需要依赖离线地图获取交通规则,限制了自动驾驶系统的“在线化”趋势。

因此,高德地图联合西安交大提出了 Driving by the Rules 的概念。提出了“将交通标志中的车道级交通规则整合至在线构建的高精地图中”这一新的具有挑战的任务,并提供一个 Benchmark 供研究人员展开相关研究。


Introduction

1.png

交通标牌是道路上的“视觉语言”,在指示交通规则中发挥了关键作用。由人类驾驶过程的启发,从交通标志中理解交通规则需要完成两个任务,理解交通标志牌中指示的车道级交通规则内容,并明确规则作用于具体哪一条车道(关联到具体的车道中心线)。同时完成上述两个任务,才能为自动驾驶系统提供准确的车道级交通规则作为指导。现有的相关工作往往关注于二者其一,缺乏对此项任务的全面研究。

为了填补当前研究的空白,高德地图依靠对交通场景强大的采集能力,组织了MapDR数据集,包含了超过 10,000 个真实驾驶场景以及18,000 条结构化车道级驾驶规则,并且提出了Integrating traffic regulations into online HD maps任务以及评测指标。同时,高德地图提出了一个模块化方法VLE-MEE和一个端到端方法RuleVLM,为此项任务提供了有效的 Baseline。数据集以及方法细节请见下文:

论文链接:https://arxiv.org/abs/2410.23780v2

项目主页:https://xuanmaixue.github.io/Driving-by-the-Rules.github.io


Integrating traffic regulations into online HD maps
本文所提出任务关注于将交通标志中的车道级交通规则整合至在线构建的高精地图中,需要完成两个子任务:
  • 从交通标志中抽取车道级交通规则

  • 建立交通规则与车道中心线之间的关联关系

如下图所示,本文将车道级交通规则定义为多个 key : value 构成的结构化表达,以便于整合至自动驾驶系统中服务于规控等下游步骤。现实场景中一个标志牌中可能包含多条车道级交通规则,同时每条交通规则也可能与多条车道中心线相关联,这也是解决此任务中的难点。


Dataset & Benchmark

MapDR Dataset

MapDR 数据均高德地图的真实采集数据,关注于来自于北京、上海、广州三座城市的常见交通标志牌以及道路信息。数据集包含了超过 10,000 个行车场景,其中超过 18,000 条驾驶规则。

其中每个场景(一个 Clip)包含:

  • Raw Data
    • 30+ 帧连续前景图像
    • 关注交通标志的位姿(每个场景仅关注于一个标牌)
    • 以标牌为中心 100m * 100m 范围内的矢量化地图(包含矢量线型)
    • 相机内参以及每一帧对应的相机位姿
  • Annotation
    • 标牌中包含的若干条车道级交通规则以及对应的车道中心线
    • 每条交通规则对应的标牌内区域(以位姿表示)

数据表示如下图所示:

Evaluation Metric & Benchmark

总体任务可以视为一个二分图匹配任务,如上图所示。其中抽取车道级交通规则视作对于图中 Rule Node 的预测,Rule 和 Centerline 之间的关联关系可以视作图中 Edge 的预测。评测时两个子任务分别关注于 Rule Node 和 Edge 的 Precision 和 Recall,总体任务关注于最小子图(由一个Rule Node、一个 Centerline Node 和 一条 Edge 组成)的 Precision 和 Recall

示例如下(R.E. 指规则抽取,C.R.指关联关系推理):

最终方法的评价指标以 F1 Score 为标准


Approach

Modular Approach

模块化方法由三个级联模块构成:

  • Grouping:融合标牌图像信息和 OCR 信息完成标牌上元素的车道级区域分组
  • Understanding:依次融合单个分组的 OCR 和标牌图像信息,使用融合后的信息进行分类以预测交通规则中每个 key 对应的 value
  • Association:对矢量地图进行特征编码并且与交通规则特征进行信息融合,通过二分类完成判定每条车道中心线是否与交通规则关联

其中 MEE 模型专门用于对矢量地图进行特征编码,将每个矢量点进行 tokenize,使用 learnable query 配合 Intra & Inter Instance Attention 进行矢量特征的聚合,融合后每个 query 对应一条矢量的特征信息。通过 CrossAttention 进行矢量特征和交通规则特征的融合,使用融合后的 feature token 进行分类以判定中心线与规则的关联关系。

End-to-End Approach

端到端方法在多模态大模型基础上进行了探索,以 Qwen-VL-Chat 7B 作为基础模型,如图所示分别以不同方式进行了LoRA SFT,令模型生成结构化文本形式的交通规则:

  • TextPrompt:输入完整前景图像 + 标牌图像,将矢量点坐标以文本形式进行输入。
  • VisualPrompt:输入包含矢量投影的完整前景图像 + 标牌图像
  • RuleVLM(best):输入完整前景图像 + 标牌图像,使用 MEE 对矢量进行特征抽取并且对齐至 LLM

Experiment

在 MapDR 数据集上进行的实验结果如上表所示,启发式方法(OCR 判定 + 最近车道线匹配)难以理解复杂的交通标志牌内容,同时也无法完成复杂场景下的车道-规则关联。VLE-MEERuleVLM分别为模块化方法和端到端方法提供了有效的 Baseline。


Conclusion

综上所述,本文的贡献如下:

1、首次提出了 Integrating traffic regulations into online HD maps 任务,以及用于基准测试的 MapDR 数据集和评测指标。
2、MapDR 包含 10,000+ clip,涵盖了不同的交通状况,并包括超过 18,000 条人工标注的车道级交通规则。所有数据都是真实采集,并且经过了细致的校验,助力于相关任务的研究。
3、提出了模块化(VLE-MEE)和端到端(RuleVLM)两种建模方法,为目标任务并和未来的研究提供有效的 Baseline 方法。

相关文章

  • 玉柴专卖AMT离合器既舒适又耐用
    玉柴专卖AMT离合器既舒适又耐用

        AMT变速系统,全称为自动机械变速器,是从经典的手动变速器进化而来,融合了自动化技术的新型传动装置。它在保留原手动变速器基本架构的同时,融入了先进的电子控制系统,旨在为驾驶者提供更为简便的换挡操作,提升驾驶体验,...

    2025-07-27 21:04:27 玉柴专卖
  • 旭阳资讯 | 旭阳海斯坦普公司第四次董事会顺利召开
    旭阳资讯 | 旭阳海斯坦普公司第四次董事会顺利召开

          ..   XUYANG GROUP近日,旭阳海斯坦普公司在集团召开第四次董事会。旭阳在中国会前,海斯坦普中国亚太区首席执行官洛安东率队调研了旭阳座椅、集团展厅,高度赞扬了集团入驻...

    2025-07-16 11:00:44 长春旭阳工业集团
  • “双第一”地位持续保持,玲珑轮胎再获权威认证
    “双第一”地位持续保持,玲珑轮胎再获权威认证

    日前,全球权威咨询机构弗若斯特沙利文(Frost & Sullivan)正式授予玲珑两项市场地位认证:基于2024年销量数据,玲珑再获“中国乘用车轮胎销量第一”与“全球新能源汽车配套轮胎销量第一”的权威认证,延续2023年数据双赛道...

    2025-07-16 09:48:07 新能源汽车玲珑轮胎
  • 无缝美学+极致密封!FlushSeal™又双叒叕获奖了!
    无缝美学+极致密封!FlushSeal™又双叒叕获奖了!

    在2024年度汽车开闭件、密封及玻璃天幕系统科技创新金鳞奖评选中,库博标准凭借其创新的FlushSeal™密封系统荣获金鳞奖。该奖项旨在表彰该领域突出的科技创新成果,具有极高的权威性和影响力。库博标准的FlushSeal™密封系统专为应对汽...

    2025-07-10 06:48:01 库博标准
  • 新品上市 | RPC系列屏蔽泵:稳驭液冷 省效无忧
  • 常州移动一行来访朗新,共探新能源创新应用场景
    常州移动一行来访朗新,共探新能源创新应用场景

    6月23日,中国移动通信集团江苏有限公司常州分公司总经理凌锋一行来访朗新科技集团考察交流。双方围绕新能源汽车聚合充电、电力市场化交易、新电视业务等展开深度研讨,就技术协同创新、场景生态构建及商业模式探索等方向达成合作共识。座谈会上,凌锋总经...

    2025-07-08 09:16:25 朗新
  • 福田普罗科百台环卫车交付全南,助力城乡环境焕新升级
    福田普罗科百台环卫车交付全南,助力城乡环境焕新升级

    6月上旬,近百台崭新的福田普罗科环卫车辆整齐列队,正式交付江西省赣州市全南县。此次交付的车辆阵容强大,涵盖洗扫车、洒水车、压缩式垃圾车等多款主力车型,标志着全南县城乡环卫作业机械化水平迎来显著提升。目前,该批专业车辆已全面投入全南县各区域运...

    2025-07-07 01:17:13 福田普罗科
  • 东风集团成立“奕派科技”,引发自主品牌整合猜想
    东风集团成立“奕派科技”,引发自主品牌整合猜想

    撰文/周菊随着奕派科技的成立,纳米品牌或将纳入旗下管理,而风神品牌则暂时保持独立运营。6月26日,东风汽车集团有限公司(下称“东风集团”)宣布,成立东风汽车集团股份有限公司奕派汽车科技公司(下称“奕派科技”或“新公司”),此举旨在通过聚焦整...

    2025-07-06 21:17:01 国产车
  • 引擎焕新・全保护航,守护爱车更省心!
    引擎焕新・全保护航,守护爱车更省心!

       还在为发动机“过保”后的高额维修费用而担忧吗?发动机一旦出现故障,那犹如无底洞般的维修开支,让每一位车主都倍感压力。别担心,玉瑆商城发动机有偿全保服务重磅上线,一次选择,为您的爱车提供 3 - 4 年的安心保障!精...

    2025-07-05 13:02:52 玉柴专卖
  • 【安全提醒】高温来袭,请谨慎车辆爆胎→
    【安全提醒】高温来袭,请谨慎车辆爆胎→

    炎炎夏日,高温时段尽量减少外出若需驾车出行,除了做好防暑防晒一定要警惕车辆爆胎爱车过夏必备轮胎防故障实用技巧轮胎是车辆与地面接触的关键部位烈日暴晒和高温路面摩擦会使胎压升高、橡胶老化爆胎风险大增当前,随着路面温度持续攀升汽车轮胎爆胎、胎压异...

    2025-07-01 11:20:46 汽车用品青岛高速出行服务平台
发表评论