让AI直接操控你的Mac桌面！peekaboo黑科技体验

你有没有想过——让 AI 直接帮你操作桌面应用，而不是你手动去点？

Mac 用户有福了。今天推荐一个刚上架 SkillsMP 的重磅 Skill：peekaboo。它是一个 macOS 原生的 UI 自动化 CLI，配合 Claude Code 或 OpenClaw 使用，AI 能直接”看见”屏幕上的按钮、”点击”界面元素、在输入框里打字、截图、切换窗口……就像你坐在电脑前操作一样。

它能做什么？

peekaboo 本质上是一个全功能的 macOS UI 自动化工具。安装后，AI Agent 就能通过自然语言命令操控你的桌面：

• 界面感知：截图、标注视图、分析 UI 元素，AI 能知道屏幕上有什么
• 精准操控：点击按钮、在输入框里打字、拖拽、滚动、滑动手势
• 窗口管理：切换窗口、最小化/最大化、移动窗口位置、管理 Spaces
• App 控制：启动/退出应用、操作菜单栏、读写剪贴板、调出系统对话框
• 截图 & 录制：全屏/窗口/区域截图，录制操作视频

使用方式

安装只需要一行命令：

brew install steipete/tap/peekaboo

然后在 Claude Code 或 OpenClaw 里加载这个 Skill 即可。第一次使用需要给 macOS 授权「屏幕录制」和「辅助功能」权限（系统设置里点两下就行）。

使用示例：

# 让 AI 分析屏幕上某个窗口的 UI
peekaboo see --app Safari --annotate

# 让 AI 自动点击某个按钮
peekaboo click --on B3 --app Safari

# 让 AI 填写表单
peekaboo type "user@example.com" --app Safari
peekaboo press tab --count 1 --app Safari
peekaboo type "password123" --app Safari --return

为什么值得关注？

过去的 AI Agent 只能处理文本和代码，遇到需要”点按钮”的场景就卡住了。peekaboo 彻底打破了这个限制——它让 AI 真正拥有了桌面级别的操控能力。

更重要的是，它跟 OpenClaw 无缝集成。设置好 bridge socket 后，OpenClaw 的 AI 能直接复用 macOS 系统的屏幕录制和辅助功能权限，不需要额外跑一个守护进程。

适合谁用？

如果你用 macOS、又经常让 AI 帮你处理桌面任务，peekaboo 是目前最优雅的解决方案之一。自动化测试、批量处理、重复性桌面操作……这些以前必须手动做的活，现在都可以交给 AI 了。

⭐ GitHub：https://github.com/openclaw/openclaw

Homepage：https://peekaboo.boo

GitHub: https://github.com/openclaw/openclaw