这个 AI 爬虫让我彻底躺平了！20万星开源项目，自动采集+AI清洗+存Notion

你还在手动复制粘贴数据？这个 AI 爬虫让我躺平了

做运营、搞副业、盯市场数据的朋友，一定有这种痛苦——每天要盯着好几个网站，把数据一条条复制到表格里。职位信息、竞品价格、GitHub 热榜……手动操作不仅累，还容易漏。

最近我发现了一个叫 data-scraper-agent 的 AI Skill，直接把「爬数据」这件事彻底自动化了。

这货能干啥？

简单说：给它一个公开数据源，它自动定时采集、AI 清洗整理、存入你的数据库（Notion/Sheets/Supabase），还能根据你的反馈越学越准。

支持的场景包括但不限于：

• 职位招聘网站信息监控（LinkedIn、猎聘、Cutshort）
• 电商平台价格追踪（降价提醒）
• GitHub 新仓库发现（带摘要）
• 新闻/社交媒体舆情监控
• 体育赛程/比分追踪
• 学术论文更新（arXiv 等）

成本：几乎为零

这是最离谱的地方——整个链路全免费：

• 爬虫：requests + BeautifulSoup（免费）
• AI 清洗：Gemini Flash（Google 免费，500 req/day，100万 token/day）
• 定时任务：GitHub Actions cron（对公开仓库免费）
• 存储：Notion API / Google Sheets / Supabase（均有免费额度）

零服务器、零费用，躺平式数据采集。

安装只需一行命令

用 Claude Code 或支持的 AI 工具，复制这条命令：

npx skills add https://github.com/affaan-m/everything-claude-code --skill data-scraper-agent

装完告诉它你要监控什么，它会自动帮你搭好完整的数据采集 agent。

适合谁用？

如果你有以下需求，这个 Skill 简直是为你量身定做：

• 运营人员：监控竞品动态、舆情
• 投资人：追踪 GitHub 新项目
• 猎头/HR：抓取职位更新
• 研究人员：追踪学术论文
• 任何人：不想手动复制粘贴数据的人

总结

data-scraper-agent 把数据采集的三个环节（采集 → AI 处理 → 存储）全自动串联，真正的「设置一次，躺平永久」。

GitHub 20万+ stars 的明星项目，实测好用。

⭐ 查看 GitHub 仓库

GitHub: https://github.com/affaan-m/everything-claude-code