AI 终于不抢我鼠标了：这款开源 Skill 让 Codex / Claude 在 Mac 后台替你干活

最近翻 GitHub 撞到一个有意思的项目——Open Claudex Computer Use，GitHub 上只有 11 个 star（截至发稿），但思路是真的够野：给 AI agent 一个独立的「副屏车道」，让它能在你的 Mac 后台同时操作原生应用，而你照常用自己的电脑干活。

为什么这个 Skill 值得聊

现在 Codex、Claude Code 这些 AI 编程 agent 越来越卷，已经不满足于「帮你写代码」，而是直接「替你操作电脑」——Computer Use（电脑使用）这个概念今年彻底爆了。官方版的 Codex Computer Use 体验惊艳，但它是闭源的，而且用起来必须占用前台，你没法同时干别的。

Open Claudex 直接瞄准这个痛点：把 Computer Use 能力开源出来，而且支持后台运行。在 Mac 上，你让 agent 去操作 Safari、Notes、Finder、Calculator，它就老老实实在自己的车道里跑，你继续用你的鼠标键盘，互不打扰。

核心功能速览

• 原生 macOS 执行层：用 Swift 写的本地 MCP server，通过 macOS Accessibility API 操作应用，配合同进程虚拟光标可视化
• 后台运行：这是跟官方版最大的区别——agent 在后台干活，前台留给人类
• 多 agent 兼容：Claude Code、Codex、以及任何支持 MCP 协议的 agent harness 都能直接接入
• 支持的应用分级：
  • Stable：Safari、Notes、TextEdit、Calculator、Finder、系统设置——AX 树完整，操作丝滑
  • Limited：Chrome、Edge、VS Code、Slack、Cursor——部分走坐标兜底，依赖剪贴板
  • Best-effort：微信、飞书/Lark 这类 WebView 重灾区——能跑但不能保证稳定

实操三步上手

对 Claude Code 或 Codex 用户来说，集成非常简单：

1. 下载 release 安装包（macOS 13+、Swift 5.9+）
2. 授予 Accessibility 和 Screen Recording 权限
3. 在 agent 的 MCP 配置里指向这个 server

装完之后直接跟你的 AI agent 说「帮我打开 Safari 搜一下 xxx，然后把结果存到 Notes 里」就行。它会调截图+AX API 找到对应按钮、点击、输入，最后给你返回 post-action state，不需要你来回贴截图。

对设计师 / 创意工作者的价值

想象几个场景：让 agent 自动整理 Finder 里的素材库、批量给设计稿加水印导出、自动在 Notion 或飞书里同步进度——这些「流程脏活」现在都能交给 AI 后台跑，你专心做创意判断。对 AIGC 玩家更友好的是，这个项目本身就是开源的，你可以 fork 改成自己的私有版本，加自定义应用适配。

踩坑提醒

• 目前仅支持 macOS，Windows 用户还得等官方版的 Foreground-only 方案
• 需要手动授权系统权限，第一次启动会跳引导
• WebView 类应用（微信、飞书）支持还很弱，别指望它帮你自动回微信

总结：如果你玩 Claude Code 或 Codex，又恰好是 Mac 用户，强烈建议试试这个 Skill。它把「AI 替你干活」从演示场景推进到了真正可日常使用的阶段，而且 MIT 开源协议，可以放心魔改。

👉 GitHub：https://github.com/OpenCodexLabs/open-codex-computer-use

GitHub: https://github.com/OpenCodexLabs/open-codex-computer-use