让AI编程助手直接调80+个成熟爬虫!scraping-skills有多省心?
不是写代码,是写完代码后:网站加了反爬、登录失效、IP 被封、页面结构又变了——然后你花三小时改脚本,而不是在做真正有价值的事。
scraping-skills 就是来解决这个问题的。
这是一个开源的 Claude Code / Cursor / Windsurf 技能包,核心逻辑非常聪明:不让你自己写爬虫,而是把你写的爬虫需求路由到 80+ 个已经维护好的 Apify 爬虫。每个 Skill 就是一个路由表——识别你的意图,告诉 AI 该用哪个现成爬虫,附上 Apify Store 的链接,按结果付费。
支持哪些场景?
- 求职市场:LinkedIn、Indeed、Naukri、RemoteOK、SimplyHired、CutShort、AmbitionBox
- 社交媒体:Instagram、Threads、X(Twitter)、Reddit、Pinterest、YouTube
- 印度本地商业:JustDial、IndiaMART、MagicBricks、NoBroker、99acres、Zomato、Google Maps 印度
- 房产:Zillow、Redfin、Realtor——房价、租金、近期成交全覆盖
- 电商产品:Amazon、AliExpress、Shopify 店铺、全球贸易数据
- B2B 线索:公司数据、联系人丰富、企业注册信息、LinkedIn 员工
- 评价与口碑:Trustpilot、TripAdvisor、Google Maps、AmbitionBox
- 政府开放数据:SEC 文件、法院记录、临床试验、FDA、PubMed、拨款数据
安装方法巨简单:把 skills/ 文件夹复制到你的 AI 编程助手的技能目录即可(Claude Code 是 ~/.claude/skills/)。每个 SKILL.md 都是自解释的,AI 加载后就能用。
这个项目由 The Mine Works 维护,他们在 Apify Store 上线了 80+ 个爬虫工具,全部有公开的 GitHub 客户端仓库,MIT 协议,完全开源。
如果你经常需要从各个平台抓数据,与其每次手写爬虫,不如让 AI 直接调用成熟的、有人在维护的爬虫服务。省心太多。
GitHub 仓库:themineworks/scraping-skills
评论区
0 条评论
登录后可评论。