Workflow
小米ORION
icon
搜索文档
正式开课!端到端与VLA自动驾驶小班课,优惠今日截止~
自动驾驶之心· 2025-08-14 07:33
点击下方 卡片 ,关注" 自动驾驶之心 "公众号 戳我-> 领取 自动驾驶近15个 方向 学习 路线 可以说VLA是当前自动驾驶量产一个新的里程碑,业内很多公司都在布置人力研发。从E2E+VLM到VLA,技术呈现递进式的发展。最近很多小伙伴也联系到我 们,其中不乏传统规控、感知、预测方向的小伙伴表示想转VLA。可是苦于技术栈涉及面太广,转行无从下手,网上也没有很好的学习资料, 为此我们联合国内 TOP主机厂算法专家,打造了《端到端与VLA自动驾驶小班课》!技术专家带你深入端到端与VLA算法原理与技术开发,今日正式开课! 全面了解端到端自动驾驶 第一章 深入学习端到端背景知识 第二章 大语言模型 BEV感知 扩散模型理论 强化学习与RLHF DEEPSEEK及LLM优化技术 二段式端到端到底是个啥? 第三章 港科技PLUTO 浙大CARPLANNER(CVPR'25) 中科院最新PLAN-R1 一段式端到端的全面学习 第四章 基于感知的一段式端到端 基于世界模型的一段式端到端 基于扩散模型的一段式端到端 基于VLA的一段式端到端 两大实战直击科研&落地第一线 独家大作业RLHF微调 第二章 揭秘大模型强化学习神 ...
面试了很多端到端候选人,还是有很多人搞不清楚。。。
自动驾驶之心· 2025-07-20 16:36
端到端自动驾驶技术概述 - 端到端自动驾驶分为一段式端到端和二段式端到端两大技术方向 是当前薪资最高的算法岗位之一 3-5年经验可冲击百万年薪 [2] - 核心优势在于直接从传感器输入到车辆规划/控制信息的直接建模 避免了传统模块化方法的误差累积 BEV感知技术实现了模块间的统一视角 [2] - UniAD模型统一了感知和规划任务 标志着端到端时代的来临 但并非最终解决方案 后续涌现出多种技术流派 [2][4] 主要技术流派 - **二段式端到端**:以PLUTO为代表 专注于用模型实现自车规划 [4] - **一段式端到端**: - 基于感知的方法:以UniAD为代表持续发展 [4] - 基于世界模型的方法:以OccWorld为代表开创新流派 [4] - 基于扩散模型的方法:以DiffusionDrive为代表实现多模轨迹预测 [4] - **VLA方向**:大模型时代下的端到端新方向 结合视觉语言模型技术 [4][22] 行业应用与人才需求 - VLA/VLM大模型算法专家岗位薪资达40-70K*15薪 博士应届生可达90-120K*16薪 [9] - 技术岗位覆盖感知算法、模型量化部署等多方向 实习岗位日薪220-400元 [9] - 主机厂已开展端到端算法预研和量产交付 形成完整技术落地闭环 [25] 技术发展挑战 - 需同时掌握多模态大模型、BEV感知、强化学习、扩散模型等跨领域知识 [14] - 论文数量繁多且知识碎片化 缺乏系统性学习框架和实战指导 [14] - 高质量文档稀缺 提高了技术入门门槛 [14] 课程体系设计 - **知识框架**:覆盖BEV感知、扩散模型理论、强化学习与RLHF等核心技术栈 [6][23] - **案例研究**: - 二段式端到端解析PLUTO、CarPlanner等经典算法 [21] - 一段式端到端深入UniAD、OccLLaMA等前沿工作 [22] - **实战环节**: - 扩散模型轨迹预测实战Diffusion Planner [22] - VLA方向实战小米ORION开源框架 [22] - 大作业RLHF微调实现技术迁移应用 [24] 技术发展趋势 - 世界模型应用扩展至场景生成、闭环仿真等多场景 成为近年研究热点 [22] - 扩散模型与VLM结合推动多模轨迹预测技术落地 [22] - VLA被视为端到端自动驾驶的"皇冠" 工业界招聘需求旺盛 [22]