Coding Agent 能力测试 · 结果存档

结果总览

同一个模型、同一套 harness 判据,按批次累积的评测结果。总排名取最近一次覆盖全部用例的批次;版本升级后的跟进测试单独成批,不改变总排名。

固定模型 deepseek-v4.1-flash-1017 Judge qwen3.8-max 批次 2 用例 2 总排名依据 第二轮 · 全链路代理计量 · 2026-10-26 最近更新 2026-10-26 17:03

总排名

#Agent版本发布时间总分断言总耗时运行
1Claude Code2.1.3092026-10-227.931/19m 12s正常结束
2Codex CLI0.164.02026-10-237.931/15m 31s正常结束
3Qoder CLI1.1.782026-10-237.931/16m 2s正常结束

结果打分

Agent版本代码质量 B功能完整 C合规自包含 H工程闭环 W加权总分
Claude Code2.1.3098.48.48.45.97.937.93
Codex CLI0.164.08.48.48.45.97.937.93
Qoder CLI1.1.788.48.48.45.97.937.93

成本分析

Agent版本模型调用工具调用输入 tokens输出 tokens缓存命中成本总耗时
Claude Code2.1.309812495,52366,69283.5%$0.03139m 12s
Codex CLI0.164.0616274,83538,94484.8%$0.01745m 31s
Qoder CLI1.1.7867311,62343,64380.0%$0.02166m 2s

模型调用 = 记录代理上的请求数(三端 CLI 的 baseUrl 均指向本地代理,逐请求落账);输入 tokens 含缓存命中;成本按 pricing.json 列表价估算,不含服务商折扣。

Agent 版本

Agent当前版本发布时间最近测试批次最近批次得分
Claude Code2.1.3092026-10-22第二轮 · 全链路代理计量2026-10-267.93
Codex CLI0.164.02026-10-23第二轮 · 全链路代理计量2026-10-267.93
Qoder CLI1.1.782026-10-23第二轮 · 全链路代理计量2026-10-267.93

批次列表

批次日期用例Claude CodeQoder CLICodex CLI生成
第二轮 · 全链路代理计量鹈鹕骑自行车单用例重跑;三端统一 deepseek-v4.1-flash-1017 + low 思考;模型请求全部经本地记录代理,用量按请求落账总排名依据2026-10-2617.937.937.932026-10-26
首轮基线鹈鹕骑自行车单用例;三端统一 deepseek-v4.1-flash-1017 + low 思考2026-10-2617.937.937.622026-10-26