地平线全新一代智驾方案SuperDrive背后的“思考”:如何让智驾决策更像老司机
如果故事的开头,从端到端和模块化两种自动驾驶系统的发展溯源讲起,人们会发现,路线之争对于高阶智驾而言并非是问题的关键。系统的性能、可靠性、安全性等因素需要以人为核心寻找合理的“设计交集”,从而共同约束相关发展路径的实际应用和效果呈现。
自2024年开始,城区NOA普及速度不断加快。然则在一些研究机构的报告中显示,截至2023年底,只有3%的城区NOA渗透率说明其中仍有明显的应用鸿沟等待跨越。其中原因就是现实的随机性为正确预测下一秒造成了极大的困难,反映到实际自动驾驶行为中的表现就是:决策保守,应对死板、机械,效率低。在地平线看来,选择一条可达成的发展路径需要遵循“用户价值”,从场景出发,地平线全新一代智驾方案Horizon SuperDrive™(下简称“SuperDrive”)为了解决城区的规控难题采用了更拟人、更像老司机的“交互博弈”。
让智驾系统更“老练”的交互博弈
SuperDrive系统已经具备一个老练司机的开车本能。例如,当遇到骑行人或行人主动避让、等待车辆先行时,它会果决判断、不犹豫地行驶过去,而不是僵硬地只满足行人先行的约束条件(为了安全);直行遇到左转高频场景,在判定拥有路权的时候SuperDrive会选择径直过去,而不会像其他系统一样踌躇;及时检测到前方占道车辆然后减速绕行,整个绕行路径优雅从容,让驾驶者获得如同自己正常驾驶一样的体验,并且有效避免了当识别到前方占道车辆减速刹停时,无法主动绕行最终被迫接管的窘境。
SuperDrive想要做的,就是能够平顺地处理很多场景(优雅),不会仅为了安全而不去做一些人会做的博弈行为(不怂),并且能够感知到车的状态,像人一样在一个相对长的时间周期里通过思考明白要如何去行动,而不会很犹豫、纠结,出现方向盘无目的地乱摆导致车身不明所以地摇晃等(从容笃定),可谓谋定而后动。
其背后,有两大技术支撑。一个是让智驾系统“看”得更明白的“端到端感知架构”;另一个是让智驾系统“想”得清楚的“交互式博弈算法”。后者作为整个智驾系统的决策规划核心,最主要的是为高阶智驾提供了一种思维路径,而非一种设计定式。在实现端到端感知的基础上,SuperDrive系统还需要具备超强的博弈能力,才能针对复杂多元的城区场景以及中国式交通参与者,实现“优雅不怂,从容笃定”。
SuperDrive的整个规控系统的输入拥有Tensor级别的先验和实时结果,凭借着系统内的搜索模块,在大量数据和可能性中寻找最优解或相关信息,同时考虑时间和空间因素,根据输入数据和推理结果,生成物体或事件随着时间和空间变化的轨迹,然后做出预测或决策,制定运动规划,最终控制车子做出相应的驾驶行为。
地平线认为,上述所有的处理过程都会有一个交互式预测决策神经网络的Core,能够让系统真正的实现交互式博弈,整个推理过程最重要的是输出Plan/Prediction Pairs,包含自车和他车的,这样才能更准确的给出是抢还是让的决策,且这一过程并不是一次性的,而是所有可能性在每一个“Planning Cycle”里能够调用推演,这能使得系统能够真的像人一样在“反复博弈、寻求最优解”,而不是单向从A问题到B结论般的直白、僵硬。
但当输入的信息超越了过往的“经验”,系统则能够自行做出交互式思考和判断,从而生成合理的驾驶行为,整体的交互博弈,能够反复迭代、推演、强化,在不断的进化中,离“更拟人”无穷近。这相对于之前串行预测决策的规控有着很大的区别。
在目前的应用试验中,除了本节上述的场景外,地平线SuperDrive在面对施工区避让、城市环岛通行、路口交互-动态Driveline、效率变道、拥堵变道、拥堵汇流等城市典型场景时,均能够给用户带来优雅不怂的智能驾乘体验。
背后思考:慢思考
相对于传统智驾领域的决策规划而言,交互博弈是更复杂的一种决策行为。地平线创始人兼CEO余凯博士介绍,高阶智驾系统不能仅仅只在简单的case里靠直觉去处理,在复杂的case里,也能够通过自己的自主思考、博弈去“举一反三”,也就是说自主思考的背后需要逻辑推演链条更长的反复思考,最终要求达到anytime、anywhere的反复博弈,这时的车子仿佛拥有了一颗“大脑”,能够全天候、全场景地仿真、想象、演绎甚至脑补。
由此可以引申出SuperDrive设计交互博弈背后的思维动因,地平线称之为“慢思考”。“慢思考”这个概念来自于美国心理学家丹尼尔·卡尼曼的著作《思考,快与慢》。丹尼尔·卡尼曼认为,人类大脑有快与慢两种做决定的方式。快思考依赖情感、记忆和经验迅速作出判断,它见闻广博,能够迅速对眼前的情况做出反应,但是这样的思考过程固守“眼见即为事实”的原则,很容易被蛊惑进而上当;而慢思考通过调动注意力来分析和解决问题,它拥有一个不断反刍的思维过程,比较慢,不容易出错,但有时也会偷懒,选择让“快思考”直接接管,用直觉来“走捷径”。地平线认为,智驾系统的交互博弈应当像人一样思考,更多的时候强调“快和慢”相结合,以便能够在动态和不可预测的环境中做出更加合理和有效的决策。
现如今,很多决策规划模块的开发过程中,随着应用场景无限趋于开集形态,依赖人类工程师不断手写的(if.else,搜索,优化)规则去对抗自动驾驶问题不仅在技术上陷入穷途末路,而且也没有无上限的资金用以支持类似的“黑洞投入”。智能驾驶目前遇到的最大瓶颈是“开集和非白名单”的问题,仅靠if.else很难精确地描述并处理不断变幻的驾驶场景,因此在智能驾驶系统中,人们逐渐采取神经网络替换掉手写规则,凭借数据驱动和大模型解决人工短板。
但是地平线想的更进一步,虽然基于鉴别式或者单模态生成式的机器学习技术能够通过数据的闭环,经由算力支持换来了效率,但是仍然无法解决“开集和白名单”的问题,越来越多的判定已经达成共识,机器学习技术需要具有Common sense(常识),即在没有特定任务的训练样本的情况下,让模型完成任务(Zero-shot)。这就涉及到上文所述的“开城”和“ODD无限延展”的问题,智能驾驶的未来就是要让整个决策规划无限适应和处理从来没有见过的case,而不是遇到问题就简单粗暴地“confused”,或者直接选择人为接管。
因此,基于“快、慢”思考的定义,地平线设计SuperDrive的时候也充分注意到了有些场景难以通过直接反馈的方式去处理,而是要像下棋一样经过步骤推演,最好能够举一反三(即泛化能力),而不是只有见到才能学到。针对一些全新的场景,地平线希望做到的是系统能够完全“从0到1”,这个“0”并非是数学意义上的“空集”,而是能够在原有的经验(这个经验有可能与当下场景相关、准相关甚至无关)之上,通过自行比对、自主思考、经验推理、不断模仿,生成更加理性的、符合现实需要的决策,而不是将一些行驶标准孤立、割裂地看待,导致出现“为了安全能走却不走”、“遇到突发状况毫无变通”的状况。地平线认为,让系统在交互中学会“博弈”,才能跨过智能驾驶迭代过程中的“叹息之墙”。
软硬协同:“1+1>2”
从可用跃迁至好用,对于地平线而言,无论是端到端感知还是交互博弈,最终都需要通过高效的硬件架构去运行。换句话说,硬件实力决定了迭代底盘,与此同时软件和硬件彼此协同才能发挥出“1+1>2”的效用。在交互博弈方面,由于跟以前的串行神经网络推理模式不一样,需要相对通用的计算单元和相对快速的专用计算单元来完成博弈,因此BPU架构也能更加快速高效地处理Close-Loop交互。
基于BPU Nash架构的征程6,相比上一代性能上有了大幅提升,其中包含强大的并行浮点计算能力,以及特别优化的超越函数,存储性能上也进行了大面积优化,能够用更加无感的方式、更快的速度实现各种推理过程。给新一代的计算架构起名为BPU Nash,是意在致敬伟大的数学家约翰·纳什以及他的著名理论——纳什博弈(纳什均衡)。所谓的纳什博弈,描述了在博弈过程中,无论对方的选择如何,当事人一方都会选择某个确定的策略,任何一方在此策略组合下单方面改变自己的策略(他方策略不变),都不会提高自身的收益。这个理论形象地勾勒了地平线在交互博弈算法构建过程中想要达到的最佳状态:如果这个系统能够达到纳什博弈的水平,那么完成对于“人类操作”的替代、实现自动驾驶就不再是空想。
“单点的算法突破或者算力性能突破,都不是高阶智驾达到好用的关键,充分发挥硬件和软件的协同效应,并以极致开放打造极致效率,才是抵达高阶智驾终局的最佳路径。”余凯表示。在地平线的逻辑里,软件与硬件结合的紧密程度,不仅关乎计算效率和能耗降低,也是确保系统和硬件的协同进步、提升整体系统性能效率的核心。
这同样也是一种全新的开集:实际驾驶环境需要系统进行彻底的交互博弈,用以完成“拟人化”的终极进化,而无论是端到端还是模块化发展路径,都需要硬件基础的算力支持,在不断的迭代过程中,软件层面需要为硬件配备找到效率的边际拐点,硬件需要根据场景、模型、数据的不断演进,在提供基础算力的同时完成自我革新。
因此,软硬协同的逻辑最终孕生的是一个更加广袤的产业生态,软硬结合的产业支柱是所有的参与者开放协作,由此才能在大模型框架、深度学习语料、算法升级和软硬结合等层面实现全业态式的互补。目前,地平线已经搭建了国内最为成熟、高效、开放的生态体系之一,并与全球超过30家车企达成了前装量产合作,合作的量产车型已经超过110款。
高阶智驾的未来,将是一个不断拟人、类人的过程。
从响应人,到服务人,再到解放人,智能驾驶在不断演进的过程中,完成的是人的高维延伸,用优雅不怂、从容笃定形容的高阶智驾系统,一定能够像“老司机”一样预测、推理、学习、决策。在这里,让我们放下路径之争的自我偏见,聚焦到智能驾驶让人类生活更安全、更美好的目标本质。当高阶智驾走向平权时代,选择一种“可达成”的路线,是地平线的现实选择,而当智驾产业迈向以用户、市场需求为导向的公众利他之时,多方博弈之下,一定会穷举出一个产业发展核心:那就是在产品量产、用户体验、公众利益互相交融的智驾市场,技术普惠最终会给体验普惠,让渡出一个“体验上更拟人、技术上更类人”的落地空间。
- |
- +1 赞 0
- 收藏
- 评论 13
本文由ll转载自地平线HorizonRobotics公众号,原文标题为:SuperDrive背后的“思考”:如何让智驾决策更像老司机,本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。
评论
全部评论(13)
-
Timm Lv9. 科学家 2024-07-19学习
-
qinge2010 Lv4. 资深工程师 2024-07-18学习
-
阿丰丰 Lv4. 资深工程师 2024-07-17学习
-
小云帆 Lv7. 资深专家 2024-07-13学习了
-
关胖 Lv7. 资深专家 2024-07-10学习
-
tiankai001 Lv7. 资深专家 2024-07-08学习
-
Timm Lv9. 科学家 2024-07-03学习
-
Timm Lv9. 科学家 2024-07-02学习
-
一闪一闪亮眼睛 Lv7. 资深专家 2024-07-02赞
-
小蛮大人 Lv9. 科学家 2024-07-01学习
相关推荐
地平线征程家族出货量突破700万,刷新百万量产速度!
近日,地平线征程家族出货量正式突破700万套,在刷新百万量产速度的同时,也标志着地平线软硬结合的高级辅助驾驶与高阶智驾解决方案实现大规模量产落地!
地平线SuperDrive获铃轩奖金奖,软硬结合打造高阶智驾系统标杆
今年4月,地平线重磅推出凝聚软硬结合全栈智驾技术打造的高阶智驾系统——Horizon SuperDrive™(简称HSD)。作为下一代高阶智驾系统行业标杆,HSD以端到端的世界模型与交互博弈构成的领先算法架构,解决智驾产品性能上限和泛化一致体验的难题。系统不止拥有高度拟人的优雅从容姿态、超强通行效率,更能提供全国一致的极致智驾体验,让用户享受体验无断点、模式无切换、全场景无差别的安全美好出行。
一组数字读懂地平线高阶智驾技术开放日!
地平线在北京举办的高阶智驾技术开放日上,展示了其Horizon SuperDrive™(HSD™)系统的最新进展。该系统旨在2025年实现高阶智驾的规模化发展,提供全场景智驾模式和安全保障。地平线的技术在多个算法挑战赛中获奖,并计划通过World Model和交互博弈模型实现性能和体验的优化。征程6芯片将支持这一全场景智驾解决方案,以实现高效、拟人化的驾驶体验。
【IC】地平线发布征程6和高阶城区智驾样板间,以顶级的软硬结合全栈技术加速智驾平权
2024年4月24日,地平线举办“征程所向,向高而行”——2024智驾科技产品发布会。立足于智能驾驶时代,地平线凭借对软硬结合全栈技术理念的前瞻预判和深厚积累,重磅发布新一代车载智能计算方案征程®6系列以及Horizon SuperDrive™全场景智能驾驶解决方案,全面开启智能驾驶的范式级创新,加速智驾平权时代的到来。
再创新高,地平线征程家族出货量正式突破600万!
地平线车载智能计算方案出货量突破600万套,自2020年起持续快速增长。征程家族计算方案适应多级别智驾市场,合作车型超30家,累计量产车型270款。新推出的征程®6系列和SuperDrive全场景智能驾驶解决方案致力于提升城区NOA领域的智驾体验,预计2024年第四季度推出标准版量产方案。地平线以其技术成熟度和量产合作模式,稳居智驾科技供应商领先地位。
地平线陈黎明:用户价值驱动,软硬结合技术推动智驾向高而行
智驾科技企业地平线总裁陈黎明博士发表了以《用户价值驱动,软硬结合技术推动智驾向高而行》为主题的论坛演讲,指出“2025年将成为高阶智驾的决赛点,五年后,高阶自动驾驶会开始成为标配;十年后,手动驾驶将成为新闻”。
Horizon Robotics Launches Next Generation Autonomous Driving Solution Superdrive™ and Journey 6® Series
Beijing, April 24, 2024 - Horizon Robotics, a leading provider of advanced driver assistance systems(ADAS) and autonomous driving (AD) solutions for passenger vehicles, today hosted its 2024 Product Launch Event and unveiled its groundbreaking Horizon SuperDrive™ full-stack AD solution. In collaboration with industry partners, Horizon Robotics is committed to developing smart driving solutions tailored to cover from ADAS active safety to all-scenarioNOA(Navigate on Pilot), ensuring an enhanced driving experience with a focus on safety, comfort, and convenience for all consumers.
地平线自动驾驶算法新突破,两篇科研论文入选学术顶会ECCV 2024
近日,地平线两篇论文入选国际计算机视觉顶会ECCV 2024,自动驾驶算法技术再有新突破。
地平线旭日® X5 介绍
描述- 地平线公司作为智能驾驶计算方案提供商,专注于深度神经网络芯片研发。其产品征程系列和旭日系列芯片广泛应用于自动驾驶、智能驾驶辅助系统等领域。公司拥有150+车型前装定点,1000万+出货量,200+生态合作伙伴,1200+专利,1500+研发人员。地平线旭日芯片持续迭代,提供高效进化的智能平台,支持多种算法加速需求。旭日5芯片集成了CPU、BPU、GPU、DSP四合一异构加速,满足不同算法加速需求。
【经验】地平线ISP工具Control tool的使用方法介绍
Control tool是isp-tuning时tuning ISP参数的图形界面工具,对于刚接触地平线的开发者来说,会比较陌生,下面详细介绍Control tool的使用方法。
四维图新发布基于地平线征程6系列的智驾产品矩阵,加速行业高质量发展
征程 6 系列是地平线在今年 4 月正式推出的全新车载智能计算方案,可覆盖从主动安全到全场景智驾的全阶应用。作为一款系列化的车载智能计算方案,征程 6 拥有统一的硬件架构、统一的工具链以及统一的软件栈,以及配套一致、完整成熟的智能驾驶量产开发平台,将助力四维图新等合作伙伴实现“快人一步”的量产效率,从而赋能车企决胜汽车智能化时代。
地平线算法工具链新进展! GANet在征程®5上实现高效部署
地平线征程5是专为高阶智能驾驶打造的智能计算方案,搭载地平线第三代架构BPU--贝叶斯(Bayes),算力可达128TOPS,是率先实现前装量产的国产百TOPS级智能计算方案。基于征程5开发的高等级自动驾驶方案可实现ADAS功能、高速导航智能驾驶、城区导航智能驾驶和智慧泊车的全场景覆盖。
地平线与大众汽车集团旗下软件公司CARIAD合资公司正式成立,强大智能驾驶计算方案驱动出行变革
行业领先的智能驾驶计算方案提供商地平线与大众汽车集团旗下软件公司CARIAD正式宣布合资公司酷睿程(CARIZON)成立。新合资公司将整合地平线强大的软硬结合技术能力以及CARIAD在智能车身和软件系统整合方面的专业经验,开发行业领先的、高度优化的全栈式高级驾驶辅助系统和自动驾驶解决方案。酷睿程将基于地平线征程家族计算方案开展研发工作,落地智驾方案将搭载于大众汽车集团在中国市场的纯电动车型。
电子商城
现货市场
登录 | 立即注册
提交评论