地平线自动驾驶算法新突破，两篇科研论文入选学术顶会ECCV 2024

时间： 2024-07-27 来源：地平线HorizonRobotics公众号

技术问答

选型帮助

研发客服

商务客服

近日，地平线两篇论文入选国际计算机视觉顶会ECCV 2024，自动驾驶算法技术再有新突破。

ECCV（European Conference on Computer Vision，即欧洲计算机视觉国际会议），是计算机视觉领域中最顶级的会议之一，与ICCV（International Conference on Computer Vision）和CVPR（Conference on Computer Vision and Pattern Recognition）并称为计算机视觉领域的“三大顶会”。ECCV每两年举行一次，吸引了全球顶尖的研究人员、学者和业界专家，分享最新的研究成果与技术创新。

聚创新之力答智驾课题

本次地平线被录用的2篇论文是：

1、Lane Graph as Path: Continuity-preserving Path-wise Modeling for Online Lane Graph Construction

（《LaneGAP：用于在线车道图构建的连续性路径建模》）

论文链接：https://arxiv.org/abs/2303.08815

2、Occupancy as Set of Points

（《OSP：基于点集表征的占据网格预测》）

论文链接：https://arxiv.org/abs/2407.04049

车道图构建新方案：端到端学习路径，大幅提升预测规划性能

在线车道图构建是自动驾驶领域一项有前途但具有挑战性的任务。LaneGAP 是一种车道图构建新方法，将端到端矢量地图在线构建方法 MapTR（入选深度学习顶会ICLR spotlight论文）拓展到道路拓扑建模，能够大幅提升预测规划性能，应对各种复杂交通状况。LaneGAP 和 MapTR 相关工作已经在地平线高阶智驾系统SuperDrive中落地应用。

具体而言，以前的方法通常在像素或片段级别对车道图进行建模，并通过逐像素或分段连接恢复车道图，这会破坏车道的连续性。作者提出一种基于路径的在线车道图构建方法—— LaneGAP，它采用了端到端学习路径，并通过 Path2Graph 算法恢复车道图。LaneGAP在具有挑战性的 nuScenes 和 Argoverse2 数据集上定性和定量地证明了 LaneGAP 优于传统的基于像素和基于片段的方法。丰富的可视化效果显示 LaneGAP 可以应对各种复杂交通状况。

Occupancy新突破：全新视角，性能更强大，计算更灵活

OSP提出了全新视角下的自动驾驶场景建模算法——稀疏点集占据网格预测方法，通过与2D图像特征交互的点查询，建立了一种新的基于点的占用表示，可以全面理解3D场景，并且框架更灵活，性能更强大。

本文探索了利用多视角图像进行3D占据网格预测的新方法，称为“点集占据网格”。现有方法倾向于利用BEV表征进行占据网格预测，因此很难将注意力集中在特殊区域或感知范围之外的区域。相比之下，本文提出了Points of Interest (PoIs) 来表示场景，并提出了 OSP，一种基于点的 3D 占用预测的新框架。得益于点集表征的灵活性，OSP 与现有方法相比实现了强大的性能，并且在训练和推理适应性方面表现出色：可以预测感知边界外的范围；可以与基于体特征的方法集成以提升性能。在Occ3D nuScenes占用基准上的实验表明，OSP具有强大的性能和灵活性。

除了这两篇斩获ECCV 2024的最新成果，地平线在ICCV 2023上提出的VAD也有创新进展。VADv2首次提出基于概率建模的多模态决策端到端自动驾驶大模型，在闭环榜单Carla Town05 Benchmark上达到SOTA的端到端自动驾驶规划性能。

此前，VAD初步探索了基于矢量化场景表征的端到端自动驾驶算法框架，在此基础上，VADv2首次将多模态概率规划引入端到端自动驾驶，用于解决判决式模型无法建模决策的天然多模态特性的问题，从而有效提升决策的准确率。VADv2以数据驱动的范式从大量驾驶数据中端到端学习驾驶策略，在Carla闭环榜单上，相比于此前的方案，VADv2大幅提升驾驶评分，实现SOTA性能，在无需规则后处理的情况下也能有良好的驾驶表现。

于7月21日-27日，正在奥地利维也纳举办的2024国际机器学习大会（ICML 2024）上，地平线被ICML 2024接收的最新工作Vision Mamba（简称Vim）也受邀做了分享。Vision Mamba是一种新的通用视觉主干模型，相比现有的视觉Transformer，在性能上有显著提升，是接替Transformer的下一代视觉基础模型。

Vision Mamba使用双向状态空间模型（SSM）对图像序列进行位置嵌入，并利用双向SSM压缩视觉表示。在ImageNet分类、COCO目标检测和ADE20k语义分割任务中，Vim相比现有的视觉Transformer（如DeiT）在性能上有大幅提升，同时在计算和内存效率上也有显著改进。例如，在进行分辨率为1248×1248的批量推理时，Vim比DeiT快2.8倍，GPU内存节省86.8%。这些结果表明，Vim能够克服在高分辨率图像理解中执行Transformer样式的计算和内存限制，具有成为下一代视觉基础模型主干的潜力。

发送到邮箱 |
+1 赞 0
收藏
评论 8
| 转发至：

本文由ll转载自地平线HorizonRobotics公众号，原文标题为:地平线自动驾驶算法新突破，科研论文入选学术顶会 ECCV 2024，本站所有转载文章系出于传递更多信息之目的，且明确注明来源，不希望被转载的媒体或个人可与我们联系，我们将立即进行删除处理。

全部评论（8）

Timm Lv9. 科学家 2024-09-01

学习
zwjiang Lv9. 科学家 2024-08-16

学习
Chase Lv7. 资深专家 2024-08-08

学习
Timm Lv9. 科学家 2024-08-08

学习
炎宁 Lv7. 资深专家 2024-08-07

好

小蛮大人 Lv9. 科学家 2024-08-05

学习
小云帆 Lv7. 资深专家 2024-08-03

学习了
崇乾 Lv8. 研究员 2024-08-02

学习

没有更多评论了

地平线全新一代智驾方案SuperDrive背后的“思考”：如何让智驾决策更像老司机

地平线全新一代智驾方案Horizon SuperDrive™为了解决城区的规控难题采用了更拟人、更像老司机的“交互博弈”。从响应人，到服务人，再到解放人，智能驾驶在不断演进的过程中，完成的是人的高维延伸，用优雅不怂、从容笃定形容的高阶智驾系统，一定能够像“老司机”一样预测、推理、学习、决策。

厂牌及品类发布时间 : 2024-06-26

你好，开发者：基于连续路径建模的车道拓扑构建算法主题分享

在ECCV 2024上，地平线-华中科技大学联合实验室提出一种车道拓扑构建新方法—— LaneGAP，通过端到端学习路径，旨在解决传统像素级和片段级建模方法所面临的车道连续性问题，实现了车道拓扑的连续性保留，大幅提升预测规划性能，为自动驾驶中的规划模块提供更可靠的路径指导。值得一提的是，LaneGAP 相关工作已经在地平线高阶智驾系统SuperDrive中落地应用。

厂牌及品类发布时间 : 2024-08-27

地平线提供征程®系列车规级AI芯片与宏景智驾达成战略合作，共推高阶自动驾驶解决方案量产落地

6月24日，地平线与宏景智驾宣布正式成为生态战略合作伙伴，开启软硬件解决方案的全面合作。宏景智驾将基于地平线征程®系列车规级AI芯片，研发L2/L2+高阶辅助驾驶ADAS和面向L3/L4的高等级自动驾驶AD解决方案，加速智能驾驶系统的商业化发展和量产落地。

厂牌及品类发布时间 : 2022-07-28

【IC】地平线发布征程6和高阶城区智驾样板间，以顶级的软硬结合全栈技术加速智驾平权

2024年4月24日，地平线举办“征程所向，向高而行”——2024智驾科技产品发布会。立足于智能驾驶时代，地平线凭借对软硬结合全栈技术理念的前瞻预判和深厚积累，重磅发布新一代车载智能计算方案征程®6系列以及Horizon SuperDrive™全场景智能驾驶解决方案，全面开启智能驾驶的范式级创新，加速智驾平权时代的到来。

产品发布时间 : 2024-04-26

「老司机」首秀后，关于Horizon SuperDrive™的十问十答

4月24日，地平线发布了全新一代车载智能计算方案征程®6系列和Horizon SuperDrive™全场景智能驾驶解决方案。这两款产品的发布标志着地平线作为下一代全场景高阶智驾的行业标杆，为行业提供了全场景、全天候的高阶城区智能驾驶功能。围绕SuperDrive的拟人体验、端到端算法实践、原生软硬结合等优势，筛选了10个热门典型问题，带来了系统且更具针对性的解读。

厂牌及品类发布时间 : 2024-06-27

全程零接管！地平线高阶智驾系统SuperDrive畅通闹市区雨天晚高峰

大众汽车集团（中国）CEO贝瑞德与地平线CEO余凯共同试乘地平线高阶智驾系统SuperDrive，在北京闹市区雨天晚高峰挑战中，SuperDrive以零接管、高效拟人驾驶完成50分钟复杂城区行程，展现卓越通过能力和丝滑驾驶体验，二人共赞其为理想智驾产品。

厂牌及品类发布时间 : 2024-08-15

地平线与MAXIEYE达成战略合作，软硬联合部署高阶行泊一体解决方案

2022年8月2日，中国智能驾驶芯片领导者地平线与智能驾驶全栈创新及系统方案服务商智驾科技MAXIEYE宣布达成战略合作，双方将立足各自产业链布局和优势，MAXIEYE在服务于乘用车企的MAXIPILOT®高阶平台方案上。

厂牌及品类发布时间 : 2022-08-05

地平线与四维图新围绕智驾系统等多领域签署战略合作协议，打造高阶智驾解决方案

近日，地平线与四维图新达成战略合作，双方将建成全面战略合作伙伴关系，推动众源更新、ADAS、行泊一体，以及基于芯片能力互补打造的驾舱一体等多领域业务融合。地平线将基于征程®系列芯片及配套开发工具，发挥智驾视觉感知等技术优势，与四维图新开展一系列智能驾驶系统级全面合作，助力四维图新开发与落地市场领先的技术产品，为行业高速发展贡献力量。

厂牌及品类发布时间 : 2023-07-14

研讨会2024高算力SOC/MCU新技术研讨会

描述- 9月26日直播，带来SOC，DSP，MCU，AFE，IMU等高算力及周边产品，分享在机器人，多模态感知，AI，低空无人机，自动驾驶，视觉惯性里程计，微型逆变器，光伏储能，智慧医疗，数字健康，光模块等领域应用，点击了解报名

活动发布时间 : 2024-07-04

地平线算法工具链新进展！ GANet在征程®5上实现高效部署

地平线征程5是专为高阶智能驾驶打造的智能计算方案，搭载地平线第三代架构BPU--贝叶斯(Bayes)，算力可达128TOPS，是率先实现前装量产的国产百TOPS级智能计算方案。基于征程5开发的高等级自动驾驶方案可实现ADAS功能、高速导航智能驾驶、城区导航智能驾驶和智慧泊车的全场景覆盖。

厂牌及品类发布时间 : 2024-02-23

地平线基于矢量表征和概率规划的端到端自动驾驶，推出「你好，开发者」自动驾驶技术专场

端到端自动驾驶正成为高阶智驾跨越体验拐点的必选项。实现真正的自动驾驶所面临的一大挑战是无法穷尽的Corner Case。为了让大家进一步了解VADv2以及地平线在端到端自动驾驶领域的相关研发工作，地平线推出地平线「你好，开发者」自动驾驶技术专场，主题为《基于矢量表征和概率规划的端到端自动驾驶》。

厂牌及品类发布时间 : 2024-08-10

地平线（Horizon Robotics）新一代AIoT智能芯片选型表

描述- 旭日®3 是地平线针对 AIoT 场景，推出的新一代低功耗、高性能的智能芯片；集成了地平线最先进的伯努利2.0 架构引擎( BPU® )，可提供 5TOPS 的算力。新的 BPU 架构极大提升了对先进 CNN 网络架构的支持效果，并极大降低了运算对 DDR 带宽的占用率。辅以地平线天工开物® 软件开发平台，大幅简化算法开发与部署过程，降低产品的落地成本。

型号- X3M,X3E

选型指南 - 地平线 - 2022/10/25 PDF 中文下载