返回 返回
模型邮件每日6条一手

arXiv发布的一项新的长周期软件工程任务基准测试,每项任务都是在单一代码库上的一系列依赖步骤,研究发现在九个前沿模型中,表现最强的模型解决率仅为18.5%,其69项任务中有38项未被任何模型解决

Xiangkai Zeng、Zheng Liu 和 Zihao Lin 在他们于 2026 年 11 月 4 日提交至 arXiv:2611.07166 的论文《多步 SWE:编码代理能否在长期内持续构建自己的代码?》中测量了 18.5% 的解决率以及 69 项任务中有 38 项未被任何模型解决的事实。这些数字代表了九个前沿模型中最强模型在多步 SWE 基准测试上的表现,该基准测试包含 69 项软件工程任务。

已核实 2026-11-09

知情者可追踪

为何重要

多步骤工程任务的低成功率表明,即使是前沿模型在处理真实软件项目所需的持续推理能力方面仍然存在困难。

免费 · 无需银行卡

这样的事实,一周六天送达

The Daily Receipts 工作日送达,The Weekly Brief 周六送达——邮件每日6条有出处的事实,比免费网站多2条,每一条都可追溯到原始出处。免费。

获取免费每日简报

免费 · 无需银行卡 · 随时退订

现在加入,你就能在 The Receipts Ledger 上以 100 Receipts 起步——迈向免费一年知情者或专业版的第一步。 了解规则 →

查看今日简报 →