跳到正文
热点事件历史事件

研究：编码智能体框架切换不提升成绩

1 篇报道1 个报道来源9 天前更新

先了解这件事

AI 综述

Liu 与 Han 发布研究，比较 Claude Code、OpenCode 和 mini-SWE-agent 三种编码智能体框架，结论是换框架带来的成绩变化与同一配置重跑一次的波动相当，复杂框架只增加成本、不提升效果。 研究用 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash 和 HY4-Preview 五个模型，在 SWE-bench Verified 的 45 个最难任务及 447 个任务池上测试：同一配置重跑成绩可差 6 分，换框架时任务级结果翻转率为 13%，换模型则升至 22%。唯一显著差异是 OpenCode 在大任务池落后最多 9 分，约一半源于输出超限后不续写。 所有运行均离线进行；研究者曾因怀疑测试数据污染而弃用部分结果，并切断了后续运行的网络访问。闭源顶级模型 Opus 5 仅在 Claude Code 中运行。

AI 根据报道生成 · 9 天前更新

最新进展10月24日 17:21
研究发现复杂编码智能体框架只增加成本不提升效果

报道时间线

沿着报道，了解事件的不同侧面。

10月24日
  1. The Decoder
    研究发现复杂编码智能体框架只增加成本不提升效果

    一项研究对比 Claude Code、OpenCode 和 mini-SWE-agent 三个编码智能体框架，发现框架切换带来的成绩变化与同一配置重跑一次的波动相当。研究用 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash 和 HY4-Preview 五个模型在 SWE-bench Verified 的 45 个最难任务及 447 个任务池上测试，同一配置重跑成绩可差 6 分，换框架时任务级结果翻转率同为 13%，换模型则升至 22%。唯一显著差异是 OpenCode 在大任务池落后最多 9 分，约一半源于输出超限后不续写。