产品功能更新 - Windows Copilot正式更新Microsoft 365 Copilot中的Researcher智能体,新增"计算机使用"能力,可免费拥有操作电脑界面的AI助手 [1] - 新功能可生成更智能的研究、更深入的洞察和更全面的报告 [1] - 更新已在Microsoft 365 Copilot预览版上线,可通过Frontier Program测试计划获取 [2] 技术实现机制 - AI助手从"说"到"做",通过一系列可由Researcher编排层调用的新工具支撑计算机使用能力 [3] - 编排层连接到沙箱环境,提供每一步操作的截图 [4] - 当模型确定需要执行操作时,会启动一个运行在Windows 365上的云端虚拟机,与内网和用户设备完全隔离 [7] - 虚拟机处于临时沙盒环境中,仅当前会话有效,默认安装浏览器及执行命令所需组件 [8] 安全与访问控制 - 智能体指令通过安全通道发送,用户凭据不会持久保存或在沙盒环境内外传输 [9] - 安全访问需要登录认证的企业内部数据 [5] - 当模型要求用户确认操作或填写密码时,可通过安全的屏幕共享连接控制沙盒 [11] 工具与输出能力 - 沙盒环境配备虚拟浏览器、终端和文本浏览器,浏览器和终端界面输出截图返回给模型 [9] - 文本浏览器可加速纯文本内容的推理和搜索 [9] - 使用代码生成PPT、表格或APP [5] - 利用会议记录、文件、聊天记录等完善工作报告 [5] 性能表现评估 - 在BrowseComp基准测试中,Researcher with Computer Use性能比当前版本Researcher提升44% [12] - BrowseComp专注于复杂多步骤浏览任务,例如通过拼凑多个网页信息回答公司董事会会议次数问题 [12] - 在GAIA基准测试中,性能比当前版本提升6%,该测试衡量AI系统在真实世界数据中查找、验证和推理的能力 [12] - GAIA测试示例包括找到世界银行数据集、通过终端下载并使用Python提取筛选数据以回答各国储蓄总额问题 [12]
Windows AI助手免费进化!能操作电脑、登录网页、生成代码