微软 Copilot Studio 新增“计算机使用”功能

微软 Copilot Studio 新增“计算机使用”功能

Microsoft Copilot Studio 隆重推出:革新 AI 助手

Microsoft Copilot Studio 正在改变企业创建定制 AI 助手和虚拟代理的方式。这个创新平台拥有直观的图形界面,使企业能够高效地设计、测试和发布满足其特定需求的 AI 代理。

新型“电脑使用”工具:虚拟互动的突破

最近,微软在 Copilot Studio 中发布了一款名为“Computer Use” 的尖端研究预览工具。这款先进的工具使 AI 代理能够像直接使用工具一样与任何网站或桌面应用程序交互。具备“Computer Use”功能的代理现在可以执行各种任务,例如点击按钮、浏览菜单以及跨平台输入数据,从而在缺乏用于编程集成的 API 的环境中实现功能。

适应性和智能在行动

“计算机使用”工具利用强大的大型语言模型 (LLM),旨在自主适应应用程序和网站的变化。微软表示,该工具集成了内置推理功能,使其能够独立解决问题,从而提升用户体验。

企业级基础设施

为了满足企业的需求,“计算机使用”工具在微软托管的基础设施上运行,从而减轻了企业的服务器管理负担。重要的是,微软确保所有客户数据安全地保存在微软云的范围内,并承诺这些数据不会用于训练大型语言模型。

增强机器人流程自动化(RPA)

微软强调了“计算机使用”工具为机器人流程自动化带来的几项关键增强功能:

  • 实时适应性:该工具无缝响应变化,确保即使按钮或界面发生变化,工作流程仍保持不间断。
  • 用户友好型设计:用户无需任何编码专业知识,即可用自然语言表达需求。该工具还能实时、并行地查看推理过程和计划自动化过程,从而实现快速测试和改进。
  • 智能决策:代理能够分析屏幕内容并实时做出明智的选择,有效地处理复杂和动态的环境。
  • 全面的活动跟踪:用户可以访问完整的计算机使用历史记录,包括屏幕截图和推理步骤,提供透明度和责任感。

基于 OpenAI 的创新

今年早些时候,OpenAI 推出了其 Operator 工具,该工具采用了计算机使用代理 (CUA) 模型,将 GPT-4o 的视觉功能与强化学习衍生的高级推理能力相结合。微软似乎正在利用类似的底层技术来增强 Copilot Studio 中“计算机使用”工具的功能。

介入

渴望探索这一先进工具的组织可以通过微软提供的表格申请访问权限,从而亲身体验“计算机使用”功能的变革力量。

来源和图片

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注