Workflow
动作模型
icon
搜索文档
第二届中国空间智能AI设计大会:共启“AI共生力”新纪元
36氪· 2025-07-03 15:17
过去几年,在我们生活的空间中增长最多的可能就是带有智能功能的家居家电,随着AI技术的发展,智能化产品更是有接入每个产品终端、 重新定义生活空间的趋势,灯光、安防、温控、洗漱、睡眠等系统无一不因此改变设计、运行、控制逻辑。与此同时,空间智能技术不再局限 于单个设备的智能化,而是通过万物互联构建 "空间智能体",走向柔性化、交互化、自进化,变成一个可以被业主自定义的百变空间。 在此背景下,以"冠军企业首秀平台"为定位的第27届中国建博会(广州)联合36氪特别推出《头号玩家 先见未来》栏目,深入智能家居优秀 企业,对话空间智能领域头号玩家,展示企业风采与产品,讲述他们的智能进化故事,以此推动行业创新和公众的认知拓展。 其中,第二届空间智能AI设计大会是大家居行业拥抱AI变革的关键平台,记录并推动着AI与家居从初步尝试到深度融合的历程。第二届空间 智能AI设计大会即将在中国建博会(广州)现场举办,AI革新之后如何构建共生生态,敬请关注,共启"AI共生力"新纪元。 过去一年,AI技术和应用快速发展,迅速向各个领域渗透,成为重塑各行各业各种形态的重要力量。 短时间内,AI已经无处不在。清晨,唤醒你的是智能音箱,居家智能系 ...
WorldVLA:世界模型实现视觉-动作双向增强,抓取精度显著提升
具身智能之心· 2025-06-30 20:17
WorldVLA功能与定义 - WorldVLA是一种将视觉-语言-动作(VLA)模型与世界模型结合的自回归动作世界模型,通过集成动作与图像理解和生成实现双向增强 [3] - 模型采用注意力掩码策略解决自回归动作生成中的误差传播问题,在动作块生成任务中抓取成功率提升4%-23% [3][7] - 实验显示WorldVLA抓取成功率比独立动作模型高4%,视频生成能力优于普通世界模型,Fréchet视频距离(FVD)降低10% [7] VLA模型与行业背景 - 当前VLA模型依赖多模态大语言模型(MLLM)但缺乏对动作的深度集成分析,世界模型虽能预测未来状态但无法直接生成动作 [5] - WorldVLA通过统一tokenizer架构实现跨模态理解,图像tokenizer压缩比16,codebook大小8192,256×256图像生成256个token [6][14] - 动作tokenizer将连续动作离散化为7个token(3位置+3角度+1抓取状态),文本tokenizer词汇量65,536含8192图像token [14] 技术架构与训练策略 - 模型基于Chameleon架构初始化,混合动作模型数据(交叉熵损失)和世界模型数据(α=0.04平衡损失)进行联合训练 [11][15][20] - 动作模型输入含2帧历史图像,输出K个动作;世界模型输入当前帧和动作,输出下一帧预测 [16][17] - 注意力掩码机制使动作生成仅依赖视觉输入而非历史动作,避免误差累积 [18][19] 实验验证与性能表现 - 在LIBERO基准测试中,512×512分辨率WorldVLA平均抓取成功率81.8%,优于OpenVLA(76.5%)等离散动作模型 [27] - 消融实验显示集成世界模型使动作模型平均成功率从62.8%提升至78.1%,长序列任务提升显著(52.4% vs 23%) [29] - 世界模型预训练使50帧视频生成的PSNR从23.98提升至24.30,LPIPS从15.60降至15.44 [35] 创新贡献与应用潜力 - 首次提出统一动作与图像理解/生成的自回归框架,实现动作模型与世界模型的双向性能增强 [8] - 动作注意力掩码策略突破自回归模型在长动作序列生成中的局限性,为机器人连续操作提供新方案 [7][31] - 高分辨率输入(512×512)显著提升性能,验证视觉细节对机器人操作精度的关键影响 [26][27]
“创”出新活力 “闯”出新优势 ——从三个关键词看民营企业科技创新
人民日报· 2025-05-22 06:44
近日,鸿蒙操作系统首次"亮相"电脑端,国产操作系统在个人电脑领域实现重要突破,华为鸿蒙生态补 上重要一环;聚焦前沿,在全球大模型基准测试中,阿里巴巴通义千问模型Qwen3创下开源模型性能多 个新高…… "要坚定不移走高质量发展之路,坚守主业、做强实业,加强自主创新,转变发展方式,不断提高企业 质量、效益和核心竞争力"。2月17日,习近平总书记在民营企业座谈会上勉励广大民营企业和民营企业 家。 5月20日,民营经济促进法正式施行,从支持参与国家科技攻关项目、加强创新人才培养、加大创新成 果知识产权保护力度等方面为民营经济组织科技创新提供了法治保障。这是"定心丸",也是"助推器"。 敢想敢闯敢拼、创业创新创造。我国民营企业向"新"而行,"创"出新活力、"闯"出新优势,成为发展新 质生产力的关键力量,为经济高质量发展注入强劲动能。 突破—— 掌握关键技术,提质升级夯实发展根基 信息产业,民营企业集聚的行业,也是最受关注的领域之一。 3月,龙芯3C6000/D 2U双路服务器首度亮相。该服务器采用两片基于龙芯自主指令的龙芯3C6000/D处 理器,核心元器件国产化率100%,可满足通用计算、大型数据中心、云计算中心的 ...