Workflow
电子游戏
icon
搜索文档
ACMMM 2025 | 北大团队提出 InteractMove:3D场景中人与可移动物体交互动作生成新框架
机器之心· 2025-10-19 11:48
研究核心与团队背景 - 研究首次提出在含可移动物体的3D场景中,基于文本的人-物交互生成任务,并构建了大规模数据集与创新方法框架 [3] - 该研究由北京大学王选计算机研究所团队完成,第一作者为博士生蔡鑫豪,通讯作者为博士生导师刘洋,团队在顶级会议和期刊上有多项成果 [2] - 该研究已被ACMMM 2025正式接收,相关代码与模型已全部开源 [5][17] 技术挑战与解决方案 - 现有技术瓶颈在于交互类别不足且通常只考虑与静态物体的交互,引入可移动物体后任务更具挑战性,需准确识别目标、学会与不同物体交互并避免碰撞 [3][8][9] - 提出的三阶段框架包括:利用3D视觉定位模型确定目标交互物体;通过手-物联合可达图学习预测接触区域以实现精确抓取;通过局部场景建模与碰撞约束优化交互 [3][20][21][22] - 手-物可达图模块将物体表面与手部关节关键点的成对距离归一化,显式建模交互中的时空关键信息,使模型能生成符合语义的动作策略 [21] InteractMove数据集 - InteractMove数据集通过自动对齐现有交互动作与三维扫描场景构建,避免了高昂的采集成本 [11] - 数据集包含三大亮点:场景中含多个可交互物体及同类干扰项;覆盖71类可移动物体和21种交互方式;动作与物体轨迹经过严格筛选以确保物理合理性 [11] - 数据合成分为三个阶段:可移动目标物体放置、物理一致的动作对齐、基于物理规律的场景感知筛选 [11][12] 实验结果与性能 - 在InteractMove数据集上,该方法在交互准确性、物理合理性、多样性以及碰撞避免等所有指标上均取得最佳成绩 [24] - 具体表现为:多样性相较最优结果提升18%(从1.33/1.25提升至1.58),物理合理性提升14%(从0.708/0.659提升至0.813),非碰撞分数达到98.36 [24] - 消融实验证明了各模块的有效性,移除3D视觉定位导致目标距离指标显著恶化,移除手-物可达图模块则使物理合理性明显下降 [26][29] 应用前景与行业意义 - 该研究为虚拟现实、增强现实、电子游戏、数字人和机器人等应用场景奠定了坚实基础 [35] - 该技术能让AI在虚拟世界中实现更自然、更智能的人-物交互,未来将探索更大规模、更复杂场景下的人机协同和通用交互智能体构建 [35]
早报|大疆就诉美国防部判决结果提起上诉;80名韩国公民被柬拘留拒绝回国;2026年国考报考年龄放宽;京东回应下场造车
虎嗅APP· 2025-10-15 08:01
半导体行业 - 安世半导体任命首席财务官Stefan Tilger担任临时CEO,原CEO张学政被荷兰企业法庭暂停职务 [6] - 英伟达CEO黄仁勋向SpaceX首席工程师埃隆·马斯克亲手交付AI超算DGX Spark,马斯克称其每瓦特计算能力比2016年的DGX-1多100倍 [18] 金融与就业市场 - 高盛集团通知员工预计今年将进行新一轮裁员以节约成本,但公司发言人表示员工总数到年底仍将录得增长,截至9月底员工总数为48,300人,比去年同期增加近2,000人 [7] - 中央机关及其直属机构2026年度考试录用公务员计划招录3.81万人,报考者年龄一般为38周岁以下,应届硕博年龄放宽到43周岁以下 [14][31][32] - 中国人民银行将于10月15日开展6000亿元6个月期买断式逆回购操作,以保持银行体系流动性充裕 [34] 科技与互联网平台 - 沃尔玛与OpenAI达成合作,将允许顾客通过ChatGPT使用即时结账功能选购商品 [8] - 饿了么平台试点推广新版服务分制度,以扣服务分取代超时扣款机制,目前已在南通等城市展开,预计10月覆盖更多城市 [13] - 美团截至9月已在30多个城市试行超时免罚机制,计划年底全面落地 [13] - 京东回应下场造车传闻,称其联合宁德时代旗下时代电服和广汽集团推出的新车,京东主要提供用户消费洞察和独家销售,不直接涉及制造环节 [21] - 新修订《反不正当竞争法》正式施行,聚焦禁止平台强制低价、数据侵权等行为 [33] 汽车行业 - 中国汽车流通协会预计到政策期满时,补贴申请的汽车以旧换新总量将超过1200万辆,直接带动新车销售额接近1.7万亿元 [16][17] - 在申请以旧换新补贴的消费者中,60%选择了购买新能源汽车 [17] 消费电子与科技 - 大疆在美国联邦上诉法院就诉美国国防部的判决结果提起上诉,反对被列入"中国军工企业"清单 [12] - 苹果CEO蒂姆·库克访华直播带货期间,iPhone系列产品出现无法激活问题,苹果客服回应系服务器故障 [22][23] - 中国联通、中国移动获eSIM手机运营服务商用试验批复,中国电信将在全国31省区市启动eSIM业务,iPhone Air将支持三大运营商eSIM服务 [23] - 蚂蚁财富平台上工商银行积存金访问量超百万人,当日曾短暂出现"不可开户"情况 [24] 特定公司动态 - 宋城演艺表示未参与西贝IPO项目,目前暂无跨界进入餐饮预制菜行业的计划 [25][27][28] - 光伏行业协会澄清"连开三天会"传闻,称是协会月度会,A股光伏板块大涨,业内预计有重要政策将发布 [29][30] - 马斯克透露其公司xAI将利用"世界模型"技术进军电子游戏和机器人领域,并强调开发游戏的主要驱动力是个人兴趣而非盈利 [35]