标签
TRACE是一种新的自我改进方法，AI代理识别自身失败背后缺少的能力，并自我训练以解决这些问题。经过TRACE训练的Qwen3.6-27B在SWE-bench Verified上达到73.2%，以更少的训练次数超越了更大的模型。
OpenAI 描述了对 SWE-Bench Pro 的审计过程，使用了基于模型的调查代理和来自经验丰富的软件工程师的独立评审，以确保在大规模下的全面评估。
OpenAI审计了SWE-Bench Pro编码基准，发现约30%的任务存在故障，因此撤回了此前将其作为主要编码评估的建议。
OpenAI 对编码基准 SWE-Bench Pro 进行了审计，发现约 30% 的任务因测试过于严格和提示不够明确等问题而存在缺陷，建议模型开发者仔细检查结果。
基准测试综述，涵盖 SWE-Bench Pro 和 312 个真实工作流任务，可能用于评估人工智能在软件工程挑战中的表现。
本文介绍了SWE-Review，这是一个通过迭代的智能体审查和修订循环来闭环AI生成的拉取请求的框架，从而提高了代码质量和问题解决能力。实验结果表明，它优于单轮审查，并实现了有效的测试时扩展。
本文介绍了SEA，一种用于自演化代理的架构，它将自我修改限制在转向适配器和围绕冻结基础模型的版本化框架上，并使用随时有效门（anytime-valid gates）来根据固定错误预算审计修改。在SWE-bench Verified上使用四个基础模型进行的实验表明，该套件在强基础模型上提供了+4%到+5%的提升，同时防止了性能回退。
Senior SWE-Bench 是一个开源基准，用于评估AI代理在需要高级技能的软件工程任务上的表现。
SWE-rebench 排行榜已更新，新增了 GLM-5.2、Qwen3.6、Gemma 4 31B 等模型，并改进了 UI，展示了软件工程任务上的性能排名。
推文突出了 SWE-bench_pro 基准测试中参数低于 128B 的顶级 AI 模型，指出阿里 Qwen 3.6 27B 和 ornith 35B 是领先的竞争者。
一位评论员讨论了9B模型在编程基准测试中的表现，指出虽然在SWE-bench上它击败了基础模型（69 vs 53），但在行为测试和长程测试中优势缩小，说明在基准分布之外收益有限。
GitHub 对自家 Copilot 的代理工具套件与模型供应商的工具套件进行了基准测试，发现在多个基准测试中，任务解决能力相当，但使用的 token 更少，突显了 Copilot 支持超过 20 个模型的特点。
一个完全开源的Claude Code Python复制版已在GitHub上发布，支持多种模型（如GPT、Gemini），在SWE-bench Verified上达到58.2%的成绩，并号称比原版便宜6倍。
本文实证分析了基于LLM的程序修复智能体中代码执行的成本效益，发现执行被大量使用但往往不加区分，限制执行可以在对修复成功影响最小的情况下节省大量成本。
来自Jeff Clune实验室的一篇论文描述了一个AI，它通过重写自己的源代码，在没有人工干预的情况下，使用进化方法，在SWE-bench上将编码能力从20%翻倍到50%。
Azalia Mirhoseini 强调 DeLM，一种去中心化语言模型方法，其中智能体通过共享状态通信，在SWE-bench Verified上使用Gemini-3 Flash实现了约10%的提升，且成本不到一半。
LoopCoder-v2 是一个基于 18T token 训练的 7B 模型，仅用两次循环就在 SWE-bench Verified 上取得了 64.4 的成绩，性能超越 30 倍参数规模的模型。模型和代码已在 Hugging Face 上开源。
Ramp发布了自己私有的SWE-Bench基准测试，该测试基于真实的工程问题构建，使其能够在自身的金融软件生态系统中评估编码模型。
本文详细评测了Anthropic新发布的Claude Fable 5模型，并展示了作者用其一天内开发Mac App'翻箱'的过程。模型在代码生成和稳定性上有显著提升。
Claw-SWE-Bench是一个新的基准测试和适配器协议，它标准化了在SWE-bench风格任务上比较不同编码代理的评估条件，揭示了适配器设计对性能和成本有显著影响。