对github上排名火热的AI辅助工具需要持谨慎态度

排名靠前,可能是营销得好,实际效果并没有那么好。

今天测试了一下火热的codegraph( GitHub - colbymchenry/codegraph: Pre-indexed code knowledge graph for Claude Code, Codex, Cursor, OpenCode, and Hermes Agent — fewer tokens, fewer tool calls, 100% local · GitHub ),按opus的意见找了个比较大型的开源代码仓进行分析(使用codegraph和不使用的两种情况),结论是opus本身用grep等工具完成的就已经很好了,没必要装这个工具,而且codegraph号称的降低检索速度并没有明显优势。opus的意见是------除非是"在用较弱的模型、或者要长期啃一个几千上万文件、命名混乱、你两眼一抹黑的陌生大型代码库",codegraph才可能发光。而且这个工具也不适用于有很多宏的c/c++代码库。

另外也让opus分析了另一个节省context的工具context-mode( GitHub - mksglu/context-mode: Context window optimization for AI coding agents. Sandboxes tool output, 98% reduction. 15 platforms · GitHub ),这个工具大致是让AI学会用脚本分析原始数据,避免大量原始数据污染context。通过对比发现opus本身没那么傻,自己本身就会用脚本进行处理。opus同时对这个代码仓里加一堆大厂logo的方式表示鄙视------“README 顶部那排 Microsoft / Google / Meta / NVIDIA 的 logo,写的是 “Used across teams at”,但全是 # 空链接、灰色占位 badge,没有任何来源。这是典型的社会认同营销手法,基本可以判定是无依据的装点。一个项目愿意这么做,会让我对它其他自报的数字也保持一分怀疑。”:laughing: :rofl:

建议针对自己实际使用的代码仓进行工具的对比测试,找到实际有效的证据,而不是装了就觉得真有用~~

45 个赞

是的,好多垃圾项目,看了这个context mode的源码,处理简直一言难尽,而且思路也很离谱。code graph也是,感觉没有新活了,就是解析ast然后号称节省了90%+token,还有的直接破坏缓存命中,这种侵入性的插件感觉都是xx,记忆我也折腾了好多天,也都是一坨,根本不可信,浪费时间,现在这些项目我都是先看看源码实现和思路,看看commit记录分析作者想干嘛,然后看核心实现,太潦草就丢弃

15 个赞

哇,你还挨个去看代码,很厉害哦!

让ai看的,有的项目说的真的挺诱人的,宣传的是好的,实现的是一坨。。

2 个赞

但是就能trending上排名靠前,至少营销厉害

他们咋搞的呢?就纯买star然后骗小白?

ai来临后,github的star数含金量下降的厉害.
现在看个技术文章,水货文章也一大堆.

1 个赞

踩在风口上呗,传播手段是值得学习的

1 个赞

github被玩坏了,低门槛娱乐化了。

2 个赞

感觉近期的这些项目,全是人为的营销产物,并没有实战而来的口碑,现在通过开源项目引流盈利已经产业化了

1 个赞

image
已删除,感谢佬友提醒

得对比对自己代码仓是否有用,说不定就有用呢

这个怎么样,佬有试过吗

rtk-ai/rtk: CLI proxy that reduces LLM token consumption by 60-90% on common dev commands. Single Rust binary, zero dependencies

还有MinishLab/semble

3 个赞

是有点名副其实了,吹的神乎其神,用起来一般般

我有一个问题,“较弱的模型” 是值那种较弱的模型。

我推荐用 GitHub - ast-grep/ast-grep: ⚡A CLI tool for code structural search, lint and rewriting. Written in Rust · GitHub
AST CLI, 有对应的Skill 可以直接安装 GitHub - ast-grep/agent-skill · GitHub

4 个赞

你用的时候会大骂很傻的模型哈哈~

这个工具面相的是JS/TS/React 这些,如果使用这些语言的话可以试试。但是简介里也说了cc还不太会自动调用这个skill,你用的效果如何?

github的star含金量确实下降很多了,ruview这种骗子仓库都能拿那么多star…

我比较关注游戏开发相关的repo,用了十几个开源项目,其中不乏20k+ star的,不客气地说100%都是垃圾repo,除了浪费token一无是处,这类repo还有一大共性,就是issue没几个,而且issue基本不是反馈bug、feature的。
之前还想过要不要搞个github去水排行榜,搞个算法给用户打分,再按分数权重算repo的实际star数量。。

5 个赞