计算机使用智能体
通过截图、无障碍树、HID 或远程控制接口感知并操作图形桌面或实体设备的智能体；不包括仅由模型完成的视觉推理和普通远程桌面客户端。
子领域
| 项目 | 用途 | Star | 语言 | 许可证 | 最新版本 |
|---|---|---|---|---|---|
| zhongerxin/iphone-use | 通过 WebDriverAgent 和 USB 提供本地 MCP 服务，让 Codex 自动操作真实 iPhone 应用。 | ★ 4.1K | Python | MIT | v0.3.15 |
| tongyi-mai/opengcua | 结合代码执行、无障碍树、应用API、Shell与GUI操作，控制桌面的通用计算机使用智能体栈。 | ★ 109 | HTML | Apache-2.0 | v0.1.0 |
| ghorbelhamdi/buddy-android | 一个浮动 Android 聊天气泡应用，让 Claude Code、Codex 和 OpenCode 使用手机。 | ★ 70 | Java | Apache-2.0 | v2.1.13 |