VLMgineer
搜索文档
ICLR 2026 | 机器人不够聪明?VLMgineer让大模型自己「发明工具」,从设计到使用全自动
机器之心· 2026-03-20 13:21AI 处理中...
那么问题来了:今天的大模型,能否自动为机器人设计这样的工具和相应的使用动作? 来自宾夕法尼亚大学的研究者在这个方向上做了探索。他们提出了 VLMgineer,一个全自动的工具设计与使用框架,利用视觉语言模型(VLM)的创造力 与进化搜索,让机器人从零开始自主设计工具并学会使用它们。该工作已被 ICLR 2026 接收。 人类之所以能主宰地球,很大程度上归功于一项独特的认知能力—— 制造和使用工具 。从石器时代的燧石刀到现代的精密仪器,工具的发明一直是衡量智 能水平的核心标志。 然而,当我们审视当今最前沿的机器人研究,会发现一个有趣的不对称:绝大多数工作都在追求更复杂的控制策略——让机器人「手更巧」,却很少有人思 考一个更本质的问题: 能不能让工具本身更合适,从而让控制变得更简单? 试想一下:如果你需要够到远处的杯子蛋糕,与其训练机械臂做出高难度的伸展动作,不如直接设计一根形状恰到好处的「取物钩」——这才是另一种形式 的「物理智慧」。 自然界中也有相应的例子,新喀里多尼亚乌鸦可以自己制造并使用工具从狭小的缝隙中取出食物。 论文: VLMgineer: Vision Language Models as Robo ...