给AI装上”眼睛和耳朵”！Screenpipe让AI真正”看见”你的屏幕

你每天在电脑前忙成陀螺，回头却想不起刚才那个弹窗里显示的网址——这种事应该不止我一个人遇到吧？

Screenpipe API 这个 Skill 就是来解决这个痛点的。它是一个本地的 AI 助手，接入你电脑的实时屏幕、麦克风、键盘输入记录，通过本地 REST API（http://localhost:3030）暴露给 Claude 或其他 AI 工具调用。简单说：装上之后，AI 能「看见」你屏幕上的一切、「听见」你的会议录音、「记住」你打过的每一个字。

它能做什么？

🔍 回顾你做过的事
开会时没来得及记笔记？让 AI 去搜 content_type=audio&q=关键议题，会议转录直接出来。结合屏幕截图上下文，还能知道当时你在哪个窗口、看了什么材料。

📊 追踪使用习惯
「我今天在 VS Code 上花了多少时间？」「Slack 和飞书哪个用得更多？」/activity-summary 接口按时间段返回各 app 的使用时长，比任何时间追踪插件都准，而且数据全存在本地，不用担心隐私。

🖥️ 读懂你的屏幕
想要知道页面上某个按钮能不能点？/elements 接口返回完整的 UI 结构树（dedup 后只有文字节点，Token 节省 91%），让 AI 精准理解当前界面的组成，不需要截图就能操作自动化流程。

🧠 跨 session 的记忆
Screenpipe 还有个 /memories API——相当于给 AI 装了一个持久化的知识库。你可以让 AI 把重要信息存进去，下次换一个新 session 还能问出来，打破了传统 AI 助手「关掉对话就忘光」的局限。

怎么安装使用？

需要先在本地部署 Screenpipe（支持 macOS/Windows/Linux），安装后 AI 工具通过 curl 调用 localhost:3030 的接口，所有数据存在本地，不上传云端，隐私有保障。

接入 Claude 或其他 AI 助手时，只需把 Screenpipe API Skill 安装进去，API Key 环境变量 $SCREENPIPE_LOCAL_API_KEY 已在上下文中，调用时加上 Bearer Token 认证即可。

适合谁用？

• 知识工作者：经常开会、需要在会议中追踪行动项的人
• 远程/自由职业者：需要记录每天工作内容、生成 timesheet 或工作报告
• AI 效率爱好者：想给 AI 装上「眼睛和耳朵」，让它真正帮你自动化重复操作
• 隐私敏感用户：数据全本地，不想被各种 SaaS 追踪

一句话总结

Screenpipe = 给你电脑装一个永远在场的 AI 观察员，屏幕、声音、键盘全记录，让 AI 不再是「盲人」，真正变成你的第二大脑。

GitHub（含详细 SKILL.md 文档）：
https://github.com/screenpipe/screenpipe

GitHub: https://github.com/screenpipe/screenpipe