今天，微软宣布 Microsoft Copilot Studio 推出“计算机使用”预览体验。这一预览体验需要“填表申请”加入，以下是有关 Microsoft Copilot Studio“计算机使用”的详细介绍和预览获取方式：

计算机使用功能介绍

“计算机使用”工具允许 Copilot Studio 像人类一样与任何网站或桌面应用程序进行交互。“计算机使用”支持点击按钮、选择菜单并在应用程序和网站中输入内容。Microsoft Copilot Studio 工具由大型语言模型（LLM）驱动，能够自动适应应用程序和网站的变化，并内置推理能力，可以自主解决遇到的问题。

核心特点

• 实时响应变化：当按钮或屏幕发生变化时，该工具仍能继续工作，不会中断您的流程。
• 易于使用：支持可以使用自然语言描述所需的操作，无需编写代码，就能测试并优化指令，同时还能通过并排视频实时查看计算机操作的推理过程和预期的 UI 自动化路径。
• 智能决策：可以看到屏幕上显示的内容，并在复杂或不断变化的环境中实时做出明智的决策。
• 全面的可见性：使用者可以随时查看计算机使用活动的历史记录，包括捕获的屏幕截图和推理步骤。

应用场景

“计算机使用”工具适用于多种业务场景，例如：

• 客户服务：自动处理客户查询和请求，提高响应速度和服务质量。
• 数据录入：自动化数据录入过程，减少人工错误和提高效率。
• 报告生成：自动生成和更新报告，节省时间和资源。

技术细节

“计算机使用”工具基于大型语言模型（LLM），能够理解和执行复杂的指令。LLM 的推理能力使其能够在没有可用 API 进行编程集成的环境中操作。此外，“计算机使用”工具运行在微软托管的基础设施上，消除了组织自行管理服务器的需求，确保客户数据的安全。

安全性保障

为了确保“计算机使用”工具适用于企业环境，Microsoft 采取了多项措施来保护客户数据。所有数据保留在 Microsoft Cloud 范围内，并不会用于训练大型语言模型。这为企业提供了一个安全可靠的自动化解决方案。

获取预览体验

Microsoft 已经邀请了一些企业试用这一新工具。感兴趣的组织可以填写此表单来获取体验资格。

via Microsoft