The Decoder· Jonathan Kemper·· 3 小时前精选AI 评分59
研究发现，Claude Code 等复杂编码智能体框架推高 token 成本，但未提升任务通过率
Fancy harnesses make coding agents more expensive but not better, study finds
AI 导读
Liu 和 Han 的研究发现，复杂编码智能体框架更耗 token，但通常未提高通过率。研究在五个模型上比较 Claude Code、OpenCode 与 mini-SWE-agent，使用 SWE-bench Verified 最难的 45 个任务及另外 447 个任务离线测试；无论重复运行还是更换框架，结果变化的任务比例都为 13%。
推荐理由
文章呈现多模型、多任务与重复运行对照，区分了编码智能体框架的真实增益与测量噪声，并量化了系统提示词造成的成本差异。
来源：The Decoder · the-decoder.com