不同的agent客户端生成效果有多大差异?

目前使用cc、codex、opencode,感觉不出来agent客户端对AI coding的影响有多大,佬们有没有agent客户端测评的?

2 个赞

智商差距到不是很大,主要是要自订工作流时的差异

参考排行
AI Coding Agent Index & Performance Analysis

3 个赞

看这测评结果,无脑用cursor-cli就对了?

cursor-cli和 cursor 是什么关系

是相同的模型,使用不同的Agent也感觉不出来吗?
之前尝试过类似的对比,主要体感是:CC和Codex搭配自己的模型能力都很强,第一梯队,差距不大,更多的时候是风格不同。三方模型比如国产模型,OpenCode编码效果会更好一点,CC用三方模型不会用工具了不知道是不是我配置问题。

一个命令行,一个客户端有界面的区别

目前cc使用的国产glm5.1 很多需求也能搞定,可能是我项目目前还比较简单

在开发完毕后会主动做验证吗?比如通过lint类工具校验,再启动服务确认没有报错之类的?我之前测试的时候CC+Opus会做,用三方模型就不会自动做,要明确说明才会做。

会做的,会没有要求plan也会自动先对需求进行plan确认,这点比codex直接改体验还要好些。(用的国产GLM5.1模型)

不过这里好像没有统计kiro、反重力、Windsurf这些较为便宜的客户端使用性能比较。

这个我测试的时候也有发现,CC+GLM无论是否是主动开Plan,即使比较小的需求也会自动Plan。我当时是让写一个Python程序,CC+Opus、Codex都会在开发完成后自动安装依赖,启动一次服务做验证,确认没问题再退出。CC+GLM就是确认代码目录结构没问题就退出了,让我自己安装依赖,启动,报错了还得再丢给他。