Workflow
端到端量产
icon
搜索文档
明日开课!端到端量产究竟在做什么?我们筹备了一门落地课程...
自动驾驶之心· 2025-11-29 10:06
行业技术趋势与人才需求 - 端到端自动驾驶技术是当前车企的核心招聘方向,但具备量产经验的全栈人才稀缺 [1] - 技术层面需攻克导航信息引入、强化学习调优、轨迹建模与优化等难题,这些是目前量产工作的前沿 [1] - 行业对具备从模型优化、场景优化、数据优化到下游规划兜底等全栈能力的端到端人才需求迫切 [1] 课程核心内容与结构 - 课程核心算法涵盖一段式端到端、两段式端到端、导航信息量产应用、开闭环强化学习、扩散模型+强化学习、自回归+强化学习、时空联合规划等 [3] - 课程设计聚焦量产实战与就业,包含从算法框架到具体量产经验的完整链条 [3] - 课程采用小班制,仅限35个招生名额 [3][5] 讲师背景 - 讲师王路拥有C9本科和QS50博士学历,发表多篇CCF-A/B论文 [6] - 现任国内顶级Tier1算法专家,从事大模型、世界模型等前沿算法的预研与量产工作 [6] - 具备丰富的端到端算法研发和实战经验,其研发的算法已成功落地量产 [6] 详细课程大纲 - **第一章:端到端任务概述** 介绍感知任务一体化架构、规控算法学习化方案,以及开源数据集与评测方式 [9] - **第二章:两段式端到端算法** 讲解两段式框架建模、感知与PNC信息传递、优缺点,并以PLUTO算法实战 [10] - **第三章:一段式端到端算法** 介绍基于VLA、Diffusion等方法的一段式框架,并通过VAD系列深入教学 [11] - **第四章:导航信息的量产应用** 讲解主流导航地图格式、内容,及其在端到端模型中的编码与嵌入方式 [12] - **第五章:自动驾驶中的RL算法介绍** 重点介绍强化学习算法及训练策略,以弥补纯模仿学习的不足 [13] - **第六章:端到端轨迹输出优化** 进行NN Planner项目实战,涵盖基于扩散模型、自回归的模仿学习及后续的强化学习 [14] - **第七章:兜底方案 - 时空联合规划** 介绍量产中用于轨迹平滑与优化的后处理算法,如多模态轨迹打分搜索 [15] - **第八章:端到端量产经验分享** 从数据、模型、场景、规则等多视角分享量产实际问题解决经验 [16] 课程安排与学员要求 - 课程于11月30日开课,为期三个月,采用离线视频教学,辅以VIP群答疑和三次线上答疑 [17] - 章节内容按周解锁,从第一章到第八章持续至次年2月24日 [17][19] - 面向进阶学员,建议自备算力在4090及以上的GPU,并熟悉BEV感知、视觉Transformer、强化学习、扩散模型等理论基础及Python/PyTorch、mmdet3d框架 [18]
端到端量产这件「小事」,做过的人才知道有多痛
自动驾驶之心· 2025-11-24 08:03
行业人才供需现状 - 端到端技术是当前汽车行业量产的核心关键词,成为各家车企的重点招聘岗位 [1] - 市场上真正的端到端量产人才极为稀缺,该岗位要求具备从模型优化、场景优化、数据优化到下游规划兜底的全栈能力 [1] - 行业出现人才供需失衡现象:一方面求职者面临巨大就业压力,另一方面企业难以招到合适人才 [1] 技术挑战与课程设计背景 - 端到端技术在工业界量产仍需攻克诸多难题,包括导航信息的引入、强化学习调优、轨迹的建模及优化等 [3] - 为应对行业实际需求,专门设计了为期三个月的端到端量产进阶课程,聚焦从实战到落地的全过程 [3] 课程核心内容体系 - 课程涵盖核心算法包括:一段式端到端、两段式端到端、导航信息的量产应用、开闭环强化学习、扩散模型+强化学习、自回归+强化学习、时空联合规划等 [5] - 第一章重点介绍感知模型一体化架构和规控learning化方案,这是各大公司的核心必备技能 [10] - 第二章深入讲解两段式端到端算法框架,包括建模方式、信息传递机制以及PLUTO算法实战 [11] - 第三章分析一段式端到端框架,探讨基于VLA和diffusion等方法,并通过VAD系列进行深入掌握 [12] - 第四章专门研究导航信息在量产中的应用,包括地图格式、编码与嵌入方式 [13] - 第五章从模仿学习过渡到强化学习,重点介绍RL算法及其训练策略以解决corner-case场景泛化问题 [14] - 第六章进行nn planner项目实战,结合模仿学习与强化学习算法 [15] - 第七章讲解量产兜底方案,包括轨迹平滑优化算法和多模态轨迹打分搜索算法 [16] - 第八章分享实际量产经验,从数据、模型、场景、规则等多视角剖析问题解决策略 [17] 课程实施与招生信息 - 课程采用离线视频教学结合VIP群答疑模式,包含三次线上答疑,总时长三个月 [20] - 课程从11月30日开始按周解锁章节,具体安排为:11月30日第一章、12月7日第二章、12月14日第三章、12月21日第四章、12月30日、1月15日、2月10日、2月24日均为第五章 [20] - 课程仅限35个招生名额,采取小班授课模式 [5][23]
从目前的信息来看,端到端的落地上限应该很高......
自动驾驶之心· 2025-11-12 08:04
行业技术趋势 - 地平线HSD表现超预期,一段式端到端方案重新成为行业量产重心,其性能上限很高 [1] - 小鹏VLA2.0采用视觉和语言并行输入,印证了VLA是技术核心 [1] - 行业整体技术路线正从两段式端到端向一段式端到端过渡,并进一步向VLA演进,多家团队已进行相应调整 [1] 课程核心内容 - 课程重点聚焦量产实践,涵盖一段式、两段式端到端、强化学习、导航应用、轨迹优化及兜底方案 [3] - 课程仅限40名学员,旨在面向就业直击落地 [3] 讲师背景 - 讲师王路拥有C9本科和QS50博士学历,发表多篇CCF-A/B论文 [5] - 现任国内顶级Tier1算法专家,从事大模型、世界模型等前沿算法的预研与量产,具备丰富的端到端算法研发和实战经验 [5] 课程大纲详解 - **第一章**:介绍主流的感知模型一体化架构和经典的规控learning化方案,以及端到端开源数据集和评测方式 [8] - **第二章**:讲解两段式端到端算法框架,包括建模方式、感知与PNC信息传递、优缺点分析,并通过PLUTO算法实战加深理解 [9] - **第三章**:介绍一段式端到端算法框架,其可实现信息无损传递,性能优于两段式,涵盖基于VLA和Diffusion等方法,并通过VAD系列进行实战 [10] - **第四章**:讲解导航地图的格式、内容信息,及其在端到端模型中的编码与嵌入方式,以有效发挥导航能力 [11] - **第五章**:重点介绍强化学习算法及训练策略,以弥补纯模仿学习的不足,实现更好的泛化能力 [12] - **第六章**:进行NN Planner项目实战,包括基于模仿学习(扩散模型、自回归算法)和强化学习的结合应用 [13] - **第七章**:介绍量产中的轨迹平滑优化等兜底方案,包括多模态轨迹打分搜索和轨迹平滑算法,确保输出轨迹稳定可靠 [14] - **第八章**:从数据、模型、场景、规则等多视角分享量产经验,讲解如何选用合适策略快速提升系统能力边界 [15] 课程安排与学员要求 - 课程于11月30日开课,预计三个月结课,采用离线视频教学,辅以VIP群答疑和三次线上答疑 [16] - 课程章节按周解锁,例如12月7日解锁第二章,12月14日解锁第三章等 [16][18] - 学员需自备GPU,推荐算力在4090及以上,并熟悉BEV感知、视觉Transformer、端到端算法、强化学习、扩散模型等,具备Python、PyTorch及数学基础 [17]