跳到正文
热点事件持续更新

复杂编码代理框架成本更高但表现相当

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Liu和Han在五个模型上离线对比Claude Code、OpenCode与mini-SWE-agent发现,复杂框架消耗的token约为各模型最精简选项的两至三倍,但任务通过率总体处于测量误差范围内;OpenCode在较大任务池中的通过率下降则是唯一具有统计显著性的差异。 实验使用SWE-bench Verified最难的45个任务及另447个任务。重复运行或更换框架时,结果发生变化的任务均占13%;研究主要依赖一个基准,结论的外部适用范围仍有限。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月24日
  1. The Decoder精选
    研究发现,Claude Code 等复杂编码智能体框架推高 token 成本,但未提升任务通过率

    Liu 和 Han 的研究发现,复杂编码智能体框架更耗 token,但通常未提高通过率。研究在五个模型上比较 Claude Code、OpenCode 与 mini-SWE-agent,使用 SWE-bench Verified 最难的 45 个任务及另外 447 个任务离线测试;无论重复运行还是更换框架,结果变化的任务比例都为 13%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。