Workflow
自动驾驶之心
icon
搜索文档
毫末智行突然原地解散!宇宙第一正式下线
自动驾驶之心· 2025-11-27 08:04
公司运营状况 - 毫末智行于11月22日正式解散,公司账户已冻结,赔偿方案尚未公布 [2][3] - 公司自2023年起经历大规模人员流失,去年职能部门裁员约1/3甚至近半,2024年包括技术副总裁、产品副总裁、品牌官及整个公关团队在内的多名核心骨干离职 [5] - 公司官方公众号自2024年6月起已无自身资讯更新,最新内容停留在10月1日的节日海报 [6] 公司技术发展历程 - 公司成立于2019年11月29日,前身为长城汽车2015年成立的智能驾驶系统开发部 [6] - 2020年11月推出首款末端物流自动配送车“小魔驼”,2021年12月发布自动驾驶数据智能体系MANA(雪湖) [6] - 截至2023年,MANA学习时长超62万小时,支撑感知、认知、决策等技术升级 [6] - 2023年4月11日发布自动驾驶生成式大模型DriveGPT(雪湖·海若) [8] - HPilot辅助驾驶系统3.0版本已打通高速与城市场景 [9] - 公司选择高通Snapdragon Ride计算平台,成为行业首款落地高通自动驾驶芯片8650的车型 [10] 行业动态与市场影响 - 2024年3月,元戎启行开始为某主机厂提供包括无图城区NOA技术方案在内的端到端智能驾驶方案 [9] - 毫末智行解散后,社交媒体上出现相关车型用户对产品后续使用体验的担忧和不满 [11]
面向工业界的3DGS全栈学习路线图(前馈GS等)
自动驾驶之心· 2025-11-27 08:04
课程核心观点 - 3D高斯泼溅技术领域技术迭代速度极快,涵盖静态重建、动态重建、表面重建及前馈模型等多个方向[1] - 行业存在理论与实践结合的学习门槛,缺乏系统化的学习路径[1] - 课程旨在提供从原理到实战的完整3DGS技术栈学习方案,由工业界算法专家讲授[1] 课程大纲与内容 - **第一章:背景知识**:涵盖计算机图形学基础、三维空间表达、渲染管线及3DGS开发工具如COLMAP、Gsplat,并设置基于3D Real Car模型的实战作业[5] - **第二章:原理和算法**:深入讲解3DGS原理、核心伪代码及动态重建、表面重建等前沿算法,实战采用英伟达开源3DGRUT框架[6] - **第三章:自动驾驶应用**:聚焦Street Gaussian、OmniRe、Hierarchy UGP三篇工作,实战使用DriveStudio平台[7] - **第四章:研究方向**:探讨COLMAP扩展、深度估计、Relighting等方向,分析其工业界应用与学术前景[8] - **第五章:前馈3DGS**:梳理前馈模型发展历程与原理,讲解AnySplat和WorldSplat等最新算法[9] - **第六章:答疑交流**:通过线上形式讨论行业岗位需求、技术痛点等开放性问题[10] 课程安排与面向人群 - 课程为期两个半月,采用离线视频教学结合VIP群答疑模式,章节从12月1日起分阶段解锁[12] - 面向具备GPU算力、计算机图形学基础、Python/PyTorch能力的学习者,目标人群覆盖实习、校招、社招阶段[14] - 讲师为QS20硕士,现任Tier1厂商算法专家,拥有三维重建及自动驾驶仿真引擎开发经验[2]
闭环训练终于补上了!AD-R1:世界模型端到端闭环强化学习新框架(澳门大学&理想等)
自动驾驶之心· 2025-11-27 08:04
行业技术趋势 - 世界模型成为自动驾驶领域关键发展方向,具备数据生成、预训练、闭环仿真和轨迹预测等核心能力[1] - 行业领先公司积极布局世界模型技术:小米用于数据生成和闭环仿真,蔚来和华为宣布基于世界模型量产,理想汽车提出从数据闭环走向训练闭环的技术路径[1] - 中科院和华为引望提出的DriveVLA-W0模型利用7000万数据验证了自动驾驶模型的data scaling law,引发行业广泛关注[1] 技术瓶颈识别 - 现有强化学习世界模型存在系统性"乐观偏差"问题,仅基于安全专家数据训练,无法预测错误行为后果[2] - 当输入不安全轨迹时,模型会幻想不切实际的安全未来(如障碍物消失、道路被忽视),而非预测即将发生的故障[2][7] - 这种"无法想象失败"的特性使世界模型难以成为学习稳健驾驶策略的可靠评估器[2] 解决方案创新 - 提出基于公正世界模型的后训练策略优化框架,通过反事实合成流水线生成包含合理碰撞和偏离车道事件的训练样本库[3] - 创新性引入轨迹感知门控模块和自车轨迹保真度损失,确保模型预测始终忠实于指令轨迹[10][25][26] - 构建风险预测基准(RFB)系统量化模型预测灾难性故障能力,为行业提供关键评估工具[15] 技术架构设计 - AD-R1框架包含两大核心模块:新型公正世界模型设计和强化学习框架集成[14] - 公正世界模型基于I²-World高效架构扩展,采用两阶段设计:场景Token化和自回归预测[17][22] - 训练数据混合80%真实nuScenes数据与20%合成反事实数据,实证验证最优比例平衡故障样本与真实驾驶动态[44] 性能验证结果 - 公正世界模型在风险预测基准上表现优异:G-IoU达40.21%,DAF达25.10%,显著优于DOME和I²-World基线模型[47][48] - 后训练优化使两个基线模型的规划决策综合指标(PDMS)分别实现1.7%和1.1%的绝对提升[15][49] - 消融实验证实三大核心组件协同作用:反事实合成带来最关键提升,模型优化增强因果保真度,4D奖励实现最优性能[51][52] 应用价值体现 - 框架具备即插即用特性,可提升任何驾驶智能体的安全性,在复杂仿真场景中大幅减少安全违规事件[3][9] - 4D奖励建模基于物理的丰富基础,能捕捉安全性、舒适性与任务进度,超越传统2D BEV方法的限制[35] - 该方法使智能体能够在安全离线环境中从大量想象故障中学习,为现实世界自动驾驶提供关键能力[15]
即将开课!面向量产的端到端小班课,上岸高阶算法岗位~
自动驾驶之心· 2025-11-27 08:04
课程核心定位 - 课程聚焦于自动驾驶领域端到端技术的量产化实战应用,旨在解决行业量产人才稀缺的问题 [1] - 课程设计历时三个月,内容涵盖从模型优化、场景优化、数据优化到下游规划兜底的全栈技能 [1] - 课程由自动驾驶之心联合工业界算法专家开设,重点为面向就业直击落地,目前仅剩35个招生名额 [3][5] 核心算法与技术内容 - 课程涉及的核心算法包括一段式端到端、两段式端到端、导航信息的量产应用、开闭环强化学习等 [3] - 技术组合涵盖扩散模型+强化学习、自回归+强化学习、时空联合规划等前沿方法 [3] - 课程最后将分享实际的量产经验,帮助学员构建完整的量产优化知识体系 [3] 讲师背景 - 讲师王路拥有C9本科和QS50 PhD学历,已发表多篇CCF-A和CCF-B论文 [6] - 现任国内顶级tier1公司算法专家,从事大模型、世界模型等前沿算法的预研和量产工作 [6] - 所研发算法已成功落地并量产,拥有丰富的端到端算法研发和实战经验 [6] 课程大纲详解 - 第一章介绍主流感知模型一体化架构和经典规控learning化方案,以及开源数据集和评测方式 [9] - 第二章讲解两段式端到端算法框架,包括建模方式、感知与PNC信息传递,并通过PLUTO算法实战 [10] - 第三章深入一段式端到端框架,涵盖基于VLA和diffusion的方法,重点学习VAD系列 [11] - 第四章专注导航信息的量产应用,包括导航地图格式、编码嵌入方式及能力发挥 [12] - 第五章从模仿学习过渡到强化学习,重点介绍RL算法及其训练策略以解决corner-case场景 [13] - 第六章进行nn planner项目实战,结合模仿学习与强化学习,重点讲解扩散模型和自回归算法 [14] - 第七章介绍时空联合规划等轨迹平滑优化算法,作为模型直出的兜底方案确保轨迹稳定可靠 [15] - 第八章从数据、模型、场景、规则多视角分享量产经验,提升系统能力边界 [16] 课程安排与学员要求 - 课程于11月30日开课,预计三个月结课,采用离线视频教学加VIP群答疑模式 [17] - 学员需自备GPU,推荐算力在4090及以上,并具备BEV感知、视觉Transformer等算法基础 [18] - 要求掌握强化学习、扩散模型理论基础,熟悉Python、PyTorch及mmdet3d算法框架 [18] - 需要一定的高等数学、线性代数和矩阵论基础,课程按周解锁章节,持续至次年2月底 [19]
轻舟智航最新!GuideFlow:端到端轨迹规划新方案,超越一众SOTA......
自动驾驶之心· 2025-11-26 08:04
文章核心观点 - 北交&轻舟智航等团队提出新型端到端自动驾驶规划框架GuideFlow,基于Constrained Flow Matching显式建模流匹配过程,解决多模态轨迹生成中的模式坍塌问题[2][3] - 核心创新在于将显式约束直接嵌入流匹配生成过程,通过速度场约束、流状态约束和EBM流优化三种策略确保轨迹满足物理和安全约束[3][11] - 框架将驾驶激进度参数化为生成过程控制信号,实现对轨迹风格的精准调控,在主流驾驶基准数据集上取得当前最优性能,Navhard子集EPDMS分数达43.0[3][15][37] 背景回顾 - 端到端自动驾驶将感知、预测和规划构建为统一系统,支持跨任务推理并减轻级联误差问题,但传统单模态规划器无法反映驾驶场景不确定性[9] - 多模态规划方法基于模仿学习训练,因每个场景仅提供一条真实轨迹而出现模式崩溃,生成式方法虽提升多样性但难以保证约束满足[10] 算法框架 - GuideFlow包含感知条件速度场生成器、无分类器引导和安全约束采样三大模块,通过交叉注意力融合智能体令牌与地图令牌实现场景条件建模[20][21] - 采用无分类器引导训练框架,以概率掩码处理条件输入,通过引导尺度控制驾驶意图信号对运动的影响强度[23][24] - 约束生成模块中,速度场约束调整运动方向与参考方向对齐,流状态约束采用类截断策略修正偏离流路径,EBM流优化将约束执行融入能量图景[25][28][31] 实验结果 - 在NavSim数据集Navhard高难度子集上取得SOTA性能,EPDMS分数达43.0,较此前最佳结果提升1.3分[15][37] - Bench2Drive数据集上驾驶分数达75.21,成功率51.36%,优于UniAD、VAD等端到端基线模型[35][39] - 开环测试中,NuScenes数据集平均碰撞率0.07%,ADV-NuScenes数据集0.73%,在短时域预测中可靠性显著[40][41] 技术细节 - 消融实验显示规划锚点引导变体性能最优,EPDMS得分29.0,因锚点封装更丰富的决策信息[43] - 流状态约束与EBM流优化模块组合使用时性能最佳,EPDMS得分27.1,三种约束方法具有互补性[44][45] - 超参数敏感性分析表明,λ值超过0.1会过度干扰速度场,CF模块修正时机需平衡偏差修正与场景适应性[46][47]
交大一篇自动驾驶在线高精地图综述,中稿TITS!
自动驾驶之心· 2025-11-26 08:04
研究背景 - 自动驾驶产业化对厘米级环境表征提出迫切需求,传统全局高精地图因更新周期长、维护成本高难以适应城市场景快速演化[8] - "无图"方案虽避免依赖全局底图,但在复杂路口等强语义场景易产生单帧幻觉问题[8] - 利用车载传感器算力实现"边行驶边建图",通过鸟瞰视角即时恢复车道线等矢量要素,形成轻量化可差分更新的局部先验[8] - 局部矢量化高精地图构建以有序点集表示实例,成为连接重地图与无地图范式的关键桥梁[8] 研究现状 - 局部矢量建图技术自2023年以来快速发展,相关论文已超过50篇,但系统性综述仍属空白[8] - 现有综述多将矢量建图作为BEV感知附属章节,对实例级矢量解码等核心问题关注不足[8] - 亟需从任务形式到未来趋势进行全景式梳理,推动该领域从方法涌现走向系统成熟[8] 研究成果 - 首次对局部矢量化高精地图构建领域进行全景式梳理,按真值生成-特征提取-解码重建三环节系统分类[9] - 汇总截至2024年底最完备的性能对照表与公开数据集,涵盖传统测绘到局部语义栅格地图方法[9] - 系统总结真值构建方法,将其划分为局部区域获取与地图元素表征两大步骤[11] - 梳理网络结构特征,按传感器输入模态分类特征提取方法,将地图解码区分为常规元素与中心线解码[13] - 建立三类对比基准表,全面展现各类方法在精度、实时性与架构方面的研究现状[15]
模型部署/产品经理方向合伙人招募
自动驾驶之心· 2025-11-26 08:04
公众号内容升级与行业定位 - 公众号内容正从单篇文章解读向更深入的技术梳理、方案分析和观点讨论过渡[2] - 行业已进入技术深水区 难点和痛点需要更多参与者共同突破[2] - 平台致力于成为能为自动驾驶行业带来价值的技术创作平台[2] 近期行业技术动态 - 特斯拉、小鹏、理想等公司近期的技术分享引发了广泛深入的行业讨论[2] 人才招募与合作方向 - 招募方向涵盖自动驾驶产品经理、4D标注、数据闭环、世界模型、VLA、自动驾驶大模型、强化学习、端到端等多个技术领域[4] - 合作岗位主要面向自动驾驶培训合作 包括B端企业、高校、研究院所培训以及C端学生和求职人群[5] - 合作内容涉及课程开发和原创文章创作[5]
学会模仿,2周就能搞定一篇SCI
自动驾驶之心· 2025-11-26 08:04
公司服务核心方法论 - 提出通过“模仿”而非创新来快速产出SCI论文的核心理念,核心原则为不搞创新、不陷于局部细节和完美主义 [1] - 具体方法为模仿经典SCI论文框架与逻辑,并结合抄写高相似度文献、图片、段落、句子,最后使用AI工具进行降重润色以完成初稿 [1] - 该方法旨在帮助学员不仅完成单篇论文,更能掌握持续快速产出的能力 [1] 公司资源与过往业绩 - 公司拥有300多名专职于自动驾驶、具身智能方向的导师团队,导师来源于全球QS排名前100的高校,并发表过多篇顶会及子刊论文 [4] - 近3年辅导学员超过400名,中稿率高达96% [4] - 去年辅导成果包括有学员论文被CVPR和ICRA等会议接收 [3] 服务内容与流程 - 提供从选题、调研、idea验证、代码、实验、润色、投稿直至中稿的一站式科研服务 [4][10] - 服务包含个性化论文指导、导师实时互动、录播无限次回看、免费课后答疑及24小时无时差上课 [10] - 辅导目标包括帮助学员掌握技术脉络、复现模型、产出1篇论文初稿并提供投稿指导 [3] 目标学员与研究方向 - 目标学员包括有科研需求、从事人工智能领域相关工作希望升职加薪、以及考研申博留学需提升简历含金量的人群 [11] - 主要研究方向涵盖三维重建、relighting、NVS、SLAM、点云处理、VLA、机器人导航、计算机视觉等 [6] - 学员要求需自带简历并具备一定PyTorch基础 [6] 服务特色与附加价值 - 提供精准导师匹配系统,根据学员研究方向、目标期刊和基础水平从300多名导师中筛选3至5位最契合人选 [13] - 优秀学员可获得清北、MIT等名校推荐信,或获推荐至实验室实习,表现突出者可被内推至阿里达摩院、华为诺亚方舟等企业研发岗 [14] - 提供预收定金后与名师meeting的服务,并承诺meeting不满意可免费更换老师或退款 [14]
留给端到端和VLA的转行时间,应该不多了......
自动驾驶之心· 2025-11-25 08:03
课程核心观点 - 自动驾驶技术正从模块化量产算法向端到端和视觉语言动作模型演进,掌握相关前沿技术对职业发展至关重要 [1] - 行业端到端和视觉语言动作模型岗位即将饱和,为从业者留下的窗口期已不多 [1] - 推出《端到端与视觉语言动作模型自动驾驶小班课》和《自动驾驶视觉语言动作模型和大模型实战课程》,旨在帮助学员快速高效入门 [1] 自动驾驶视觉语言动作模型与大模型实战课程 - 课程聚焦视觉语言动作模型领域,内容涵盖从视觉语言模型作为自动驾驶解释器到模块化、一体化及当前主流的推理增强视觉语言动作模型 [1] - 课程配套理论基础梳理,包括视觉、语言、动作三大模块、强化学习、扩散模型等,并设有大作业章节指导学员从零搭建自己的视觉语言动作模型及数据集 [1] - 由学术界专家带队,适合刚接触大模型和视觉语言动作模型的学员 [1] 端到端与视觉语言动作模型自动驾驶课程 - 课程聚焦端到端自动驾驶宏观领域,梳理一段式/两段式方向的重点算法和理论基础,详细讲解鸟瞰图感知、大语言模型、扩散模型和强化学习 [9] - 课程设计两大实战项目:基于扩散模型的Diffusion Planner和基于视觉语言动作模型的ORION算法 [9] - 由工业界专家带队,讲师为国内顶级主机厂算法专家,拥有端到端算法研发和产品量产交付经验 [9][11] 师资团队 - 讲师团队由学术界和工业界专家组成,包括清华大学硕士生、QS30高校博士等,在ICCV、IROS、EMNLP等顶级会议发表多篇论文 [6][8][11] - 团队拥有多模态感知、自动驾驶视觉语言动作模型、大模型Agent等前沿算法预研经验,并主持完成多项自动驾驶框架工具和产品量产 [6][8][11] - 一位讲师在GitHub上维护的自动驾驶与计算机视觉开源项目总Star数已超过2k [6] 目标学员与技术要求 - 学员需自备GPU,推荐算力在4090及以上 [12] - 要求具备一定的自动驾驶领域基础,熟悉基本模块,了解Transformer大模型、强化学习、鸟瞰图感知等技术概念 [13] - 需具备概率论、线性代数基础及Python和PyTorch编程能力 [13]
这台3D扫描仪,重建了整个隧道和公园~
自动驾驶之心· 2025-11-25 08:03
产品核心定位 - 产品定位为最强性价比手持实景三维激光扫描仪,旨在降低开发门槛,助力开发者快速掌握研发能力 [3][6] - 由同济大学刘春教授团队与西北工业大学产业化团队合作开发,基于多年科研和行业积累,并经过上百个项目验证 [11] - 核心价值在于以轻量化设计和多模态传感器融合算法,提供高效实用的三维解决方案,实现厘米级精度的三维场景实时重构 [3][12] 核心性能参数 - 扫描性能卓越,每秒可生成20万点云,最远测量距离达70米,相对精度优于3厘米,绝对精度优于5厘米 [3][24][31] - 支持超20万平方米的大场景扫描,水平视角360°全域覆盖,并支持彩色点云融合输出 [3][24][32] - 系统搭载Ubuntu 20.04操作系统,支持ROS,具备实时解算和实时预览能力,数据可导出为pcd、las、ply等多种通用格式 [24] 硬件配置与设计 - 采用高度集成的一体化设计,机身尺寸为14.2cm * 9.5cm * 45cm,含电池重量为1.9kg,小巧便携 [14][24] - 集成丰富的传感器资源,包括3D激光雷达、双广角相机、深度相机、9DOF IMU、RTK模块,并采用微秒级同步技术确保数据同步精度 [15][24][25][36] - 激光雷达采用25°倾斜角度安装的小倾角设计,可兼顾多个方位扫描,提升采集效率 [17][18] - 硬件配置包括Intel N5095四核处理器、16G内存、256G硬盘,并配备高带宽网口、双USB 3.0接口及Micro SD卡槽,扩展性强 [24][25] 软件功能与操作 - 软件系统支持三维点云地图动态构建、色彩融合和实时预览,操作简单直观,可一键启动执行扫描作业 [6][24][29] - 提供快速建图、彩色点云建图、相机程序、数据录制等多种软件功能,扫描结果导出即用,无需复杂部署 [6][45] - 推出3D高斯(3DGS)版本,支持离线渲染和在线渲染两种模式,实现高保真实景还原 [7][8][53] 应用场景 - 设备适用于各类复杂室内外场景,包括写字楼、停车场、工业园区、隧道、森林、矿场等,能够精准完成三维场景地图构建 [40][49] - 支持跨平台集成,可适配无人机、无人车、机械狗、人形机器人等多种负载平台,实现无人化作业 [47] - 在地理信息数据采集、城市规划、文物保护、施工工程等领域均有应用潜力 [55][57] 产品版本与定价 - 提供四个版本以满足不同需求:基础版(19800元)、深度相机版(23800元)、3DGS在线版(39800元,云服务续费5000元/月)、3DGS离线版(67800元) [60][61] - 购买可享受为期1年的售后服务,并可通过优惠码DSAA-5T9R-K2M8获取优惠 [62]