Gemini 比 ChatGPT、Claude 菜是有原因的

CatCode 2026-08-09 17:49 1

在聊天模式下发现一点:对于 GitHub 上的 Public 仓库,如果需要参考里面的代码,这三家会有完全不同的应对方案:


ChatGPT 5.5 (免费版):怎么都不会去访问 GitHub 仓库的内容。

ChatGPT 5.6 (付费版):给 GitHub 仓库 的 URL 的时候,不会去访问 GitHub 仓库的内容。只有给的 URL 具体到了某个文件,才会去访问 GitHub 仓库的内容。


Claude 4.8 (免费版):只要给了 GitHub 仓库 的 URL 就会主动去访问仓库的内容。


Gemini 3.1 Pro (付费版):怎么都不会去访问 GitHub 仓库的内容。


不是严谨测试。但是能看出 LLM 对获取外部信息准确性的“需求程度”。LLM 刚出现那会儿就提出了 RAG 的概念。虽然现在已经是 Agent 的时代了,但是准确的外部信息依然是提高模型处理具体问题的一个关键要素。

最新回复 (8)
  • dimlau 08-09 20:11
    1
    别的没用过,但是 Gemini 是会访问的,我经常就丢个仓库链接过去,让它总结可以学习哪些思路。
    web 界面还提供了提交仓库地址的方法啊。
  • docx 08-09 21:23
    2
    这东西有点玄学,昨天刚给 claude 发过一个仓库地址,说读取不到,最后还是我把文件内容贴给他才解决的
  • jacketma 08-09 22:56
    3
    感觉 Gemini 有很短的一段时间内,智商还是在线的。
    后来,不知道怎么回事,走火入魔了还是啥的,有点老年痴呆了
  • GeruzoniAnsasu 08-09 22:58
    4
    实际上这些在线平台的后台沙盒几乎天天都在改,gemini 每隔两天行为就不一样,隔离程度也不一样。所以仅凭这个没什么参考性
  • way2explore2 08-10 03:17
    5
    这个还不设及 RAG ,只是一个 web fetch
    而且 Anthropic 是反 RAG 的,原因是他们认为 RAG 复杂且低效,他们的思路 cli 是直接抓,让大模型处理,决定抓哪里。
  • CatCode 楼主 08-10 10:01
    6
    @dimlau @GeruzoniAnsasu 这个可能确实有关系
  • CatCode 楼主 08-10 10:03
    7
    @docx 可能 LLM 不是真的去访问了网页,而是访问的是 AI 公司维护的一个网页缓存,这个项目还没有进入到缓存里面
  • doudouisamomo 08-10 10:04
    8
    还好,做小学数学题没问题
* 帖子来源V2EX
返回