微软Copilot Studio：AI模拟人类操作电脑

4月16日最新消息，微软公司于昨日（4月15日）发布官方博文，宣布推出一项名为”计算机使用”(Computer Use)的全新功能。这一创新功能使COPilot Studio AI智能体能够直接与网站和桌面应用程序进行交互操作。

作为微软推出的智能化图形化平台，COPilot Studio为企业提供了创建定制化AI助手和虚拟智能体的强大工具。通过新增的”计算机使用”功能，这些AI智能体可以像普通用户一样直接与各种网站或桌面应用进行交互，完成多样化的操作任务。

该功能目前支持包括Microsoft Edge、谷歌Chrome和Mozilla Firefox在内的主流浏览器。借助这一功能，AI智能体能够执行多种操作任务：通过点击按钮、选择菜单项或在屏幕输入框中填写内容等方式完成交互。即使目标系统没有提供API接口，只要人类用户可以进行操作的应用程序，AI智能体同样能够胜任相关任务。

据博文介绍，”计算机使用”功能成功突破了传统机器人流程自动化（RPA）技术的局限性。与以往解决方案相比，该功能能够更轻松地应对界面元素脆弱性和复杂动态界面等挑战。用户无需具备编程知识，仅需通过自然语言描述需求即可构建自动化流程。

系统还提供了完整的操作透明度：开发者可以随时查看操作历史记录、截图和推理步骤。这种创新设计使得自动化技术的应用不再局限于专业的RPA开发人员。

微软强调，该工具内置了强大的推理功能，能够自主解决遇到的问题，并实时适应应用程序或网站界面的变化。同时，依托于COPilot Studio的安全措施和治理框架，企业数据将安全存储在Microsoft Cloud环境中，绝不会用于AI模型训练。这种设计不仅降低了企业的运营成本和部署难度，还显著加速了新技术的落地应用。