端到端自动驾驶行业研究报告

报告摘要 端到端逐新成为自动驾驶行业的共识 2023会民来、在专业龙头特斯拉的标机作净、大长课代表为AG装术在式注度-防外定业兴，学术果和资三了场在造到游自动驾装领块打为事科险事作发生。 史行非一线专家，美十9%米示自二共联的态引已受入发法到谨长术， 作为新兴技术领域，端到端的基本概念存在误区，本报哲提出一套可供参考的概念定义和术语体系 以致d到量，共，个符量常的定文标准 同，编到高与大模型、望界美型，生试学污动等事案等产关机会的常被混泽， 端到端的落地面临诸多挑战，包括技术路线、数据和算力需求、测试验证、组织资源投入等 设术陷编：内到常装六率织药来形成展位实段：技术筛照导在分收。 的挑义。 训练算力：谨到法训练算支商求急剧建子、行业头部年家均传客十万- 测试验证：现有表岗接汇专法7资准于游到增三动驾典、学业系新的测议证方泌龄和工其等 瑞到端白动驾驶行业研究报店 组织备源投入：带纠式费要扫织资构定题，的费系将资源投入倾料到数其则、对有澳式发出排息： 三票、但本报专保相原结诊详法气解析。 展望：端到端将于2025年元始上车，带动上技术进步，市场和产业格局演变 点含政行业实部示家等协提生量司对室产期划，预识换展化量到对的司十2025年7龄二三， 产兆容局市百，谨到谨假我和AI人才的置安生试一少泌升，可能掌生新的产业宁工和部业楼式. 端到端自动驾独与通用人形机器人相正启发，竞遂物理山界A孔籍地之路 动多驶产发来的一期情量了夜多机都人行业的积然，包营对知算公、规划算法，中和传落载争多个是市、监年某，自动等装技术部产业定熟离提高，量到谨自动公政快共了一会已验证、可量产的法于载需动的A行T技术能文，对于通人形界人的为教减情整作 应同领处，比较二者查等始之路上谨到问逐和解路径，了以龄易一人领议复大的总发. 内容目录 前音 瑞到瑞开启新·轮白动驾独产业革命端到端的“战略共议”和“故术分歧” 01 端到端的基本概念 1.1传统自动孕驶架构041.2端到白动驾驻的定义*051.3端到端相关念的联系区别081.4尺期增到消自动的要的关链成关1.5近期到端自击驾的重要进展 02 端到端上要玩家分析 2.1 机/1 72.2白动驾融算法和系统公司192.3自动驾融生股式A1公司2.1学术研究机构 03 端到端的发展驱动力 3.1对标驱动2.63.2用户体验驱动273.3红织价值驱动..173.4技术弱动20 04端到端落地之路的挑战 4.1技术路线分歧4.2对训练数据的需求至空前提升34.3对训练算力的需求来糖高 4.4测试验证方法尚不减熟pi4.5组织资源投入的挑施344.6车载芯片算力会不会成为瓶须？4.7模型缺“可释性”长否构成摩碍？ 05 展塑端到端 5.1量产述度365.2造术发展趋势365.3产业发展趋势4() 06端到端自动驾驶与通川机器人 5.1阶反：机器人成能白动驾驶早期的安展标.2阶股二：自动驾驶产业化加速，端到载技术可反哺机解人44心.3阶股三：自动驾驶和相器人竞逐物理世界AGT 本报告访谈和编写项目组 特别卢明 图示目录 图示1：2017-2029年中围万人驾驶汽车行业投资繁体情况图示2：行业研究间卷受访者结构及其对端到类大模型的套度图示3：对十载到端落地时间、技终与和行业格同的度测图示4：传统自动驾契构的典型代表Apolln3.0款件渠构图示5:0(:典型的模块化誉到猎UniAD架均07图示7:DAVE-的网络结构图示8：归化学习的消到冲经网络12图9:传统白动驾获解决方案与OpenPilol方案对比:3图示10：/niAD架构图1 4图示1.5图示12：小美发销类到端大模型1.7.13 :华为发看ADS3.0的漏到劳架构18图示:汽车发布端到端动驾驶系筑19图15:戏启行载到端演进路露图 1:商源绝影发布UniAD消划端解决方案20图17:：紫智机密人GraghAr）端到端网络图示18：地平线SuperDrive技犬架构间载到券测步22图示19：DriveDranmrr遗型渠购2.4图示29：理热汽车准产品发布会上务与MAR81ab合作技术的落地成月情况"2.5图示21：特斯执下ST》平均接警程和尤接誉行程次数占比的演变26图示22：大语合境重终传统白然语含处理的多个任务统一为一个基酬模型28图示23：MLOpST.只链全烧图图示24：自然语言处理月发白动驾驶从传绕范式到AGI新范式的范交图示25：英伟达H100CPU头部客户样务预属3.3图示26：规实感如算法领蒙升源变H与闭源项日的性能提升对比Li图系27：结子土界棋型的伤真器和传统仿真器对比39图示28：在部到消益产前和具产后的高过NOA和域市NOA的滚透率预测4 1图示29：对通用工料能实现时间的预测- 45 前言 端到端开启新一轮白动驾驶产业革命 20233家来，对理增点员张准季术员、产止弄的染逐升， 等术研充方西，2023年6月，上海人工资能炎验%没白的TniAT>（TnifiedAutonamousDriving）我vR2023最佳记文，大实费升了这一镇的关注。聚随其后的实，一系列端图蛋主高实鼓的研究或来消罚，文一治度一产指续至个。 产客州方，将斯自FSD(FallSelrDriving）42定弱以来资至端到表的头创汽年主动广求书代空驶术公司的如投入研发物制对系统，并于最半年续对按第上平量产 常到对的子强还本司变资六市源对交公司的商点实注上，20245，寒了105美元资，其产和指询款，款汉，办伟等，宝2021二以表会（上达下降107类元的配事准资Wym于2021年上年或的25产正发展和本通人的来率： 点论采学大导、产业界在减义准自动驾装领拨情建站展，证无资本市总对相关会可的关益，部确户个格：为到带启了款一终的当动要产业率会。 端到端的“战略共识”和“战术分歧” a.落地时向预列：当受专以为量到主动象会在2-·5三间苯地 ，行业格局预划：-半受传书达务岗量会家中小额的司头公司业现有司 广注 达一券界学发映、的自动空资行业前现书：大部分权求公习理理以承受象过法一次教术齐会的后兴；另一方面，出可行业对到禁能详常风风超步，入产多基础间缺乏计治：对其来来防发量方向近型以 有多、发展题动力、革职据反和来展望：并会式为行业格建基税非识的认知动没下提取共识和*可共参考的惠点和信息：于巨清行业面临的三要分快，为相兴企业常讲究市投供参考： 第一章端到端的基本概念 1.1传统白动驾驶架构 统的自项当致来构更多衔生干制器人实沟，所以在，器人领城的高如-定 共型理有变晚系统注计包合以厂个供心情块： 感性块（Pcrccption) 像具、察光达（LiAR）、达开超事款估两器文检测开试到网用生，实他三据，人、交理生等和设路标资。影如镇规要处理安自实估影器的敏要，并等其求化为丰护可以理能的环流奠型，专统的总知读境的验出炎多是站于人其的定义，对一则进障毒物的检测，对于过界以及遗的分划等等。传的购如东惊要同证其确出健净为人所证解，定表了人对于环满的一计原。 定位棋快（Lorulieulior） 经司义支准基于地图的定位技六，划将率的专器款提与预先作的详结建压 预测模块（Preniction） ·决策与划按快(Decision and Planning) 聚生的行账择、决实何时表准意实：以及事何点对复专交通情况。就义t: 控制模快(Control) 安发法是法行资策认划块输出的实标产转将测会合量系统：它负费情计控制牢辆的油门、测车和续专，以实动平泽和安全的驾实： 测时更力尚单快建。终完，这科力其有代价定限划了模决及整个系统法恒达到 1.2端到端白动驾驶的定义 特这这六药观点呈划出教分化：“这六原望主义者”会为，市场上禁家 我们务划对法乳准自动驾装装六收-·个系统性的前念化理、并提市一实可伙参节的六是体聚 端到端架树演进 图前，当动势特款构的演益可以分为个生要阶肽： 第一阶段：感“端到”。这一阶民，知泽质测换笑就划前个宝要模块，其中，感知模块已趋通过基于多传繁录融合的过人tranatormer以及踪传军的cros8attention方案，感办通出检结果的格度及鸡定性相对之前的感郑方案部有化教大的提升，不过，规划决策楼块仍然以Rulc-baacd 主。 第二阶段：决策规划模型化。该个阶民，略个白动驾驶东为神仍然分为需部和预则决策规划两个主要模共，其中，偿停保持上一代的格决方案，但预测从百测到决美到规划的功能模完已经视集成到已一人神经网落当中。管得注高的是，与然感部和预测测划决策邮是通试来度学与实克，但是这两个主系模块之间的接亡仍然甚于人类的谨解定义（如障够位重遗率边界等）；丹外，在这一阶段，主模缺信龄会试行处正训练， 第三阶段：模块化端到并，以结*小来法：这一达的结投和小一阶伙比款类似，但是在网络结构的军市及训然方案上有很大不巨。首先，葛知模块不再整出于人类解定义的结果、雨更多垒出的是征量。相应求，预测决策规式模只的炼合类型基于特征向量输出运动规划的结果。除了两个模共之的输出以 导司时 第四阶段：OnModcl，单-偿型端到第-际限：就不有-、决等(Rcinforcenicnt I.carning,RT.）格%学(Tmitalion T.cainingT.;的多 ，模化云业OneMndel到邢金K东议-. 端到端白动驾驶行业研究报告 对个模显南认添和优化基制局限主模法内的，区可，在桌统层置省，这更多果·和局优化承非全员代化方。 到全先化的效果。 OneMHodel端到端白动驾驶 然Mode是于段的，天个根市的时间比医共中经间终（老宝+全率资简函构）来实或常到谨的主号驾典，输人利输出就是最累均的传器作导、专可角及冲门开庭。 但于维构设计讨于简单、模测的期落也让小，种专共仅准支持高建成量单性登距款大。 元、资等Iranstormer终东格车法算力（设步可表持C.1B1B级参系整络行）药格于，（meMode」的董到达方案又量新回到人的视野，正关 比于长资牛方来，OneMedel法到带方总然训步义及谢出二更大复表与三军语上、其原等致果与实高的式艾发：主要原区是、论是兴用基于RLIL的学为类东书，理是采注以世界资为基高的商主实书，为了保证能同产择、达就使等对主良事的所为东识和认知挥可及务事地应户一自动驾装，已市蒙州可以实期买好智范化效果。 北，这类案书对于萍亮以及和其他物半交五的理率具强通性，西北、官款不单为动使，也为累人等能领发的息用好了，而提券 1.3端到端相关既念的联系一与区别 瑞到瑞与决策舰划模型化 行业学·科常是的识率是“通对费型下非热则实就共策就划长放所为到道方乘“，的将二百规的第二段也归美为增到端。格需我们之前与处于，资第 区别：1）它5知洗内长口天人为定文与目专元非高是峰征、号方不 瑞到瑞与人程型 将三龄权交了代与及今局优化。比的实模量为种到端实可投件限交的了诺 及目标三交讲，大换型见做些一个多三，它提有大量的多款，能净处理问适当动驾其性内的多和表李任务：支目然诉当处理像资别等。大模型训读所需的数关型站更，出其的用，对于可师择生及款致量述行训款，对于系统的可款也共表更高，不 实限三，自员映及具意智能领燃的“大澳型”，在处整传高义上的“大型。这类穴模量止于更多考要了左端其方以及交时受求书性员，很准达到市NLP(Natural T.angugePreressing）或者通用AT同等的，Nvidia划划 2025-2026年+产 Thor,(Tera Oprratiuns Per Secon,的大模量实求，所以、自动驾装策抗的大核型部是小于止古模量，这重所调的“的定又及多的终相对于对原未事如原统采于的了多数的小模型0言。 值得三离的一点处，ce,资的网编的推能GPT3及其活的大难星系接累因，在米来，情7下、原有在自动驾典策城市交义会越交域多 编到端与世界模型 图时问的测福动作为填型价。