开发技术

Coding Agents Have Converged: Why the SWE-bench Leaderboard Can No Longer Order Its Top Entries, and What to Measure Instead

2026-09-16arxiv.org

审计254份SWE-bench提交,发现该榜单已无法区分头部编码智能体,并提出替代指标。

值得记下

当头部分数挤在统计噪声区间内,榜单排序失去区分度,编码智能体评测正从单一基准转向多维指标。

阅读原文

内容来源:arxiv.org,版权归原作者所有