Workflow
能跨App比价的手机AI助手,UIUC阿里开源可自我进化多能体框架,超越SOTA性能33.9%
量子位·2025-01-31 12:02

UIUC和阿里通义实验室联合推出新型手机智能体框架 Mobile-Agent-E 。 Mobile-Agent-E团队 投稿 量子位 | 公众号 QbitAI 手机助手执行复杂推理、多步规划以及跨App操作,同时配备自我进化模块,可以反思过往的任务记录,从经验中学习—— 在智能手机时代,每天超过5小时的屏幕使用时间已成为常态。除了娱乐,人们还需要处理大量繁琐且耗时的任务,这时人们常常希望能有一 个聪明的手机助手代劳。 为了解决现实场景中多步骤、多 App 的复杂问题,Mobile-Agent-E 构建了一个多层级、多智能体协同框架。 核心想法是显式地将高层规划(high-level planning),和低层动作执行(low-level action)区别开来。这种多层级的架构有效提升了模型 长远规划(long-horizon planning)和错误恢复(error recovery)的能力。 下图展示了一个真实案例:Mobile-Agent-E 在三个不同的购物平台(Amazon、Walmart、Best Buy)之间搜索用户想要购买的 Nintendo Switch 手柄,记录对比,并最终找到最便宜的选 ...