管理后台 · GUI智能体

GUI智能体概览

了解自然语言调用、自动化脚本和脚本调用之间的关系。

更新于

GUI智能体让客户端根据自然语言指令操作电脑或移动设备。管理后台用于查看调用结果、查看客户端生成及验证的自动化脚本,并跟踪脚本的后续调用。

能接进现有的编码智能体吗?

可以在 Codex、WorkBuddy 等编码智能体中通过 fushou-agent Skill 提交自然语言任务,也可通过 MCP 或命令行调用界面操作。智能体会观察界面、逐步操作并核对结果,返回执行结论和验证证据。

Windows、macOS 支持后台窗口操作,减少对正常使用电脑的干扰;无人值守任务建议在专用设备上运行。Ubuntu 最低版本为 24.04,iOS 仅由 macOS 客户端操作。支持的平台与真实录屏见GUI智能体产品介绍。

选择产品

使用场景 产品 客户端命令分组
操作桌面应用和窗口 GUI智能体(电脑) computer
操作 Android 设备 GUI智能体(Android) android
操作 iPhone 或 iPad GUI智能体(iOS) ios
操作 HarmonyOS 设备 GUI智能体(HarmonyOS) harmony

测试用例执行任务产生的浏览器调用也会出现在自然语言调用记录中,但不能生成自动化脚本。

从调用到复用

  1. 使用客户端的 rpa generate 提交含八个必填字段的需求。
  2. 在自然语言调用中确认结果和费用。
  3. 客户端在同一工作流中完成初始化验证、自然语言执行、脚本编写及真实脚本验证。
  4. 在自动化脚本中等待生成完成并复制调用说明。
  5. 后续脚本执行会显示在脚本调用中。

何时生成脚本

适合生成脚本的任务应当操作步骤稳定、需要重复执行,并且输入差异可以用参数表示。一次性探索、界面经常变化或依赖临时人工判断的任务更适合继续使用自然语言调用。

脚本生成会产生费用,并可能需要几分钟或更长时间。取消生成不会撤销已经产生的消费。

常见问题

为什么管理后台不能直接发起自然语言调用?

实际操作发生在运行客户端的设备上。请使用相应平台的 fushou-agent ... exec 命令。

自然语言调用和脚本调用有什么区别?

自然语言调用由智能体理解指令并决定操作;脚本调用执行已经生成的固定步骤,适合稳定重复的流程。

赋手智能体文档赋手智能体使用文档