能夠訪問網站的大模型好像不存在

問一下大老們。。。目前看到許多大模型包括chat gpt claude等等…好像對於訪問連結都不是很友善,不是幻想,就是完全不理你。想請問大老有沒有什麼方法可以在API調用中讓大模型, 訪問網站總結等等的功能

2 Likes

现在很多网站都防爬虫、要登录、要验证什么的,所以除了一些文件直链、新闻博客外,很多还是很困难的,可以自己抓取内容后提供给 AI

前排

3 Likes

现在不少服务商都提供了屏蔽人工智能企业蜘蛛的 UA 的功能,认为提供链接访问不了的话有可能是因为对方开启了这个功能;

不过也有可能是因为模型本身对 Function Call 的支持不是很完善。

可是我目前的工作流程是要用API。。。然後 做一些處理。所以如果要人工去參與的話感覺就很麻煩,不知道有什麼方法可以去爬取,不多大概爬Google第一頁第二頁的資料而已。

我記得GPT一開始出來的時候,他有提供訪問外部連結的功能,非常好用,他可以訪問連結幫你做總結等等。。。 做報告PPT或者是寫論文作文的時候,真的是非常好用的神器,可是現在他好像自宮了。。已經沒了:sob::sob::sob:

抓取方式还挺多的,可以参考一下,还有个 tavily

2 Likes

试试我这个GPT吧!使用Reader API,会能多访问一些网站、获得更好的网络搜索体验。

介绍帖:

GPT始皇共享站链接:

GPT官网链接:

当然,看你说主要需要用API,那你也可以参考帖子里说的方法,把Reader API加入工作流(或是自己部署Reader)

From 快问快答 to 开发调优