昨天帮一个做市场调研的朋友搞数据,他需要从X、YouTube、Reddit上抓取…

昨天帮一个做市场调研的朋友搞数据,他需要从X、YouTube、Reddit上抓取竞品的用户反馈,手动一个个复制粘贴太慢了。 我给他推荐了3个开源工具,现在他的AI Agent能自动从这些平台抓取数据,效率提升了不止10倍。 第一个是Agent-Reach,它把不同平台的工具打包在一起,X、YouTube、Reddit、GitHub这些主流平台都能用。不用再为每个平台单独找工具了。 第二个是Patchright Enhanced,它基于Playwright,能监听网站的请求,通过脚本抓取数据。有些网站没有API,这个工具就能派上用场。 第三个是Scrapling,一个通用的网页数据抓取工具。你可以把这三个工具都交给你的AI Agent使用。 比如你可以这样告诉Agent:"从100个X账号中收集上个月的帖子,找出最热门的话题,分析哪些内容表现好。" 或者:"从Reddit和YouTube上收集关于这个产品的评论,总结主要的投诉点。" 你告诉Agent需要什么数据,它自己写代码、抓取数据、给你结果。 这相当于给你的Agent赋予了从互联网上几乎任何地方获取数据的能力,能自动化的范围一下子扩大了很多。 项目地址: Agent-Reach:github.com/Panniantong/Ag… Patchright Enhanced:github.com/whaleyxbt/patc… Scrapling:github.com/d4vinci/Scrapl…
话题来源 @sauda_coder ❤️296 x.com/…↗ 已改写,非原文转载
21 浏览 0 评论 0 反应
登录 后参与评论
还没有评论,来抢沙发。
查看完整榜单
查看完整榜单
查看完整榜单