佬们,有没有什么可以爬取网页内容的方便工具啊

最近想学技术,想把这个文档导出来,让gpt去做知识库,给我讲解,有没有现成的好用的工具啊,没有的话我就要自己写代码搞了

2 个赞

selenium

5 个赞

不想写代码的话,可以使用“八爪鱼”
页面不多(<20页),建议直接用chrome 插件singlefile点几下
页面很多,又想试试写代码,那还是selenium吧

5 个赞

MaoXian web clipper

1 个赞

影刀

2 个赞

Automa插件可以试试

1 个赞

之前在看到过, 输入url就能用ai爬取网站, 还可以自己搭建, 不过我忘了叫什么了

1 个赞

找到了
FireCrawl
https://www.firecrawl.dev

Jina Reader

5 个赞

网页爬虫眼

1 个赞

selenium

2 个赞

佬牛!我去试试

牛逼牛逼

牛逼666