Workflow
Isaac Lab Arena
icon
搜索文档
李飞飞的World Labs联手光轮智能,具身智能进入评测驱动时代!
量子位· 2026-01-19 11:48
文章核心观点 - 具身智能行业正面临模型进步速度远超评测能力的瓶颈,规模化评测成为关键制约因素[18][20][22][23] - 为解决此问题,行业两大关键基础设施公司——李飞飞旗下的世界模型公司World Labs与仿真合成数据公司光轮智能宣布合作,标志着具身智能正式迈入“评测驱动时代”[1][2][76] - 双方合作基于“数字表亲”理念,分工明确:World Labs的Marble产品解决高保真3D环境生成的规模问题,光轮智能则提供与真实物理对齐的资产及评测闭环,共同构建可规模化运行的仿真评测系统[3][45][49][51] World Labs(世界模型公司)分析 - 公司由AI领域权威人物李飞飞创立,成立仅两年已融资数亿美元,股东包括Andreessen Horowitz、英伟达、Databricks、Adobe等顶级风投与AI生态公司[4][5][17] - 公司选择“空间智能”作为AGI发展路线,旨在构建能感知、生成、推理并与环境互动的世界模型,以突破大语言模型的智能天花板[6][7] - 核心产品Marble是一款可视化世界模型,仅需一句话、一张图片或一段视频等轻量输入,即可生成高保真、持久、可下载的3D环境,支持导出多种格式,并内置AI世界编辑器Chisel[8][9][11][12][14] - Marble主要服务于视觉特效、游戏开发等领域,实现了“一句提示→生成3D世界→一键导出至Unity”的生产力链路,但其生成的世界缺乏物理参数,需与物理引擎结合才能用于机器人训练与评测[15][16][36] 光轮智能(仿真合成数据公司)分析 - 公司是当前最炙手可热的具身智能基建公司,与英伟达关系紧密,深度参与其仿真系统底层共建,是Newton物理引擎的早期验证者和开发合作者[54][55] - 公司在仿真合成数据市场占有率极高,服务了全球前三的世界模型公司,国际主要具身团队的仿真资产和合成数据80%以上来自光轮智能[58][59] - 公司构建了三位一体的自研仿真技术体系:1)自研GPU物理求解器,支持百万级自由度并行计算;2)全自动虚实对标物理测量工厂;3)将真实物理特性规模化映射为SimReady资产与场景[52] - 基于其基础设施地位,公司推出了工业级仿真评测平台RoboFinals,并与英伟达联合打造了开源仿真评测框架Isaac Lab Arena,致力于成为行业评测标准[63][64] 行业瓶颈与解决方案 - 具身智能模型迭代速度极快(几乎每隔一两周),现有学术基准已无法准确评估其能力,行业缺乏有效的规模化评测手段[20][22][23] - 在真实物理环境中测试机器人成本高昂、难以规模化,且存在安全风险,仿真被视作规模化评测具身智能的唯一可行路径[24][27][28][29] - 李飞飞提出的数据金字塔框架中,仿真合成数据被视为最具可扩展性的主干数据形态,是解决数据与评测这一根本约束的关键[31][32][35] - 传统追求“数字孪生”(一比一复刻真实世界)的仿真方式成本极高、无法规模化,行业转向“数字表亲”理念,即追求物理与空间结构可信,细节允许近似[42][43][44][45][46] World Labs与光轮智能的合作细节 - 合作本质是“世界模型×仿真基础设施”的历史性交汇:World Labs解决“世界从哪来”,光轮智能解决“进步怎么被衡量”[3] - 分工明确:Marble负责将环境创建时间从数周压缩到数分钟,解决环境生成的规模问题;光轮智能则承担仿真中最难的部分——提供与真实物理对齐的资产及构建评测闭环[47][49] - 合作旨在构建一个世界、行为、评测高度耦合的闭环系统,使仿真成为一个可重复运行、可持续扩展的数据生产系统,让规模化评测第一次真正成为可能[50][51] - 此次合作有深厚的学术渊源,李飞飞在斯坦福时期推动的BEHAVIOR系列研究及其2025年的BEHAVIOR Challenge,早已为具身智能建立长期、可扩展的评测工程奠定基础[38][40][41] 评测驱动时代的行业意义 - 随着众多大模型公司、机器人本体公司及行业巨头涌入,具身智能路线高度分叉,行业亟需能指引方向的“路标”或“北极星”[65][67][68][69][70] - 好的评测不仅能评估模型能力,更能提前发现技术瓶颈、反向塑造研究方向,是具身智能发展中必须与模型同步扩展的系统级能力[71][72] - 作为仿真与评测基础设施提供商,光轮智能处在所有技术路线之上而非其中,这使其最适合承担客观的行业评测角色[73][74] - World Labs与光轮智能两大关键基建的联手,串联起从环境生成到物理仿真再到规模化评测的全链条,有望推动具身智能行业进入以评测为驱动的新发展阶段[75][76]
黄仁勋长女直播亮相,聊了具身智能
量子位· 2025-10-16 17:30
合作背景与公司定位 - 光轮智能是一家专注于仿真合成数据技术的公司,其核心目标是帮助AI更好地理解和进入物理世界,目前主要聚焦于具身智能和自动驾驶两大场景 [3] - 英伟达内部多个项目(如Gear Lab的通用智能体模型构建、西雅图机器人实验室的接触操作和精密装配任务)都依赖于光轮智能的支持 [6] - 光轮智能成立于2023年,旨在利用合成数据和仿真来突破机器人数据瓶颈,初期从自动驾驶合成数据问题切入,后合作扩展至英伟达多个团队 [9][10] 核心挑战与解决方案 - 机器人领域面临数据匮乏问题,无法像语言模型那样利用互联网数据,必须手动采集,仿真和合成数据工厂被视为解决方案 [8] - 机器人从虚拟到现实(Sim2Real)的核心挑战在于物理准确性,例如开门时的磁吸力、拉抽屉时的摩擦力等精确物理特性 [12][13] - 高质量数据是机器人训练系统和生成正确算法的关键,合成数据被认为是解决具身智能数据瓶颈最重要、最主要的数据来源 [15][19] - 现实世界中机器人数量有限(如工厂、家庭环境),而自动驾驶有大量汽车在道路上运行,凸显了合成数据的必要性 [18] 技术平台与研发重点 - 英伟达与光轮智能正共同开发Isaac Lab Arena,这是一个用于基准测试、评估、数据收集和大规模强化学习的下一代开源框架和平台 [7][28] - 为实现高效的大规模强化学习,需确保仿真在计算上高效,例如使用基本几何体和凸包进行碰撞检测以节省计算资源 [21] - 电缆仿真是技术难点,光轮智能与Newton及英伟达合作为电缆构建求解器,并研发仿真就绪资产 [22][23] - 光轮智能与英伟达Isaac Sim实验室合作,共同攻克仿真到现实的迁移挑战,例如教机器人利用工具完成特定操作(如切割黄瓜) [25][26][28] 关键人物背景 - 光轮智能CEO谢晨曾是英伟达自动驾驶仿真负责人 [11] - 英伟达Omniverse与物理AI高级总监Madison Huang(黄仁勋女儿)负责相关领域 [1][32] - 英伟达机器人产品线经理Spencer Huang(黄仁勋儿子)负责开发用于机器人的AI模型与仿真软件 [36][37]
英伟达一口气开源多项机器人技术,与迪士尼合作研发物理引擎也开源了
量子位· 2025-10-02 11:26
文章核心观点 - 英伟达在机器人学习大会(CoRL)上发布了多项开源技术,旨在系统性解决机器人研发中的关键难题 [1] - 此次发布覆盖了从物理引擎、基础模型、训练工作流到硬件基础设施的“全栈式”布局,重新定义机器人研发的游戏规则 [1][10] - 行业领先的机器人公司、制造商及顶尖高校已开始采用这些技术,加速机器人从实验室走向日常生活的进程 [3][9][10] Newton物理引擎 - 该引擎旨在解决机器人技能从仿真环境安全可靠迁移至现实世界的核心难题,全球超过25万机器人开发者面临此问题 [4] - 作为开源项目,基于英伟达的Warp和OpenUSD框架构建,采用GPU加速技术,能够仿真复杂动作如雪地行走和操控细腻物体 [4] - 苏黎世联邦理工学院、慕尼黑工业大学、北京大学等顶尖高校以及光轮智能、Style3D等公司已成为其早期用户 [4] Isaac GR00T N1.6基础模型 - 该开源模型通过集成Cosmos Reason视觉语言模型,赋予机器人接近人类的推理能力,能够将模糊指令转化为可执行的逐步计划 [5][6] - 模型使机器人能同时完成移动和物体操控动作,躯干和手臂活动自由度更大,甚至可推开较重的房门 [6] - Cosmos Reason模型在Hugging Face平台下载量已超过100万次,并在物理推理模型排行榜上位居榜首 [6] - AeiROBOT、Franka Robotics、LG Electronics等领先机器人制造商正在评估采用该系列模型 [7] 训练革新与数据生成 - 基于Omniverse的Isaac Lab 2.3开发者预览版新增了灵巧抓取工作流,采用“自动化课程体系”从简单到复杂逐步训练机器人 [8] - Boston Dynamics的Atlas机器人通过此工作流学习抓取技能,操控能力获得显著提升 [8] - 英伟达与光轮智能联合开发了Isaac Lab Arena,作为开源策略评估框架,支持大规模实验和标准化测试,无需从零构建系统 [8] - 公司提供了开源物理AI数据集,包含数千条合成及真实世界轨迹数据,目前下载量已突破480万次 [6] AI硬件基础设施 - GB200 NVL72机架式系统集成36个Grace CPU和72个Blackwell GPU,已被各大云服务提供商采用 [9] - RTX PRO服务器为机器人开发提供统一架构,RAI Institute已率先使用 [9] - 搭载Blackwell GPU的Jetson Thor能够支持机器人运行多个AI工作流,实现实时智能交互,Figure AI、银河通用等合作伙伴已开始采用 [9] - 在CoRL收录的论文中,近半数引用了英伟达的相关技术,卡内基梅隆大学、华盛顿大学等顶尖研究机构均在使用其GPU、仿真框架和CUDA加速库 [9]