@KLieret: Opus 4.8 卡的一项非常有趣的研究:多智能体在 ProgramBench 上并未取得更好的结果,但它们能更快地达到…

X AI KOLs Following 新闻

摘要

Opus 4.8 卡的一项研究表明,虽然多智能体系统在 ProgramBench 上并未取得更好的结果,但它们达到中等解决方案的速度提升了一倍。

Opus 4.8 卡的一项非常有趣的研究:多智能体在 ProgramBench 上并未取得更好的结果,但它们达到中等解决方案的速度提高了一倍。https://t.co/2JiaAtxORC
查看原文
查看缓存全文

缓存时间: 2026/05/30 06:06

来自 Opus 4.8 的一项非常有趣的研究:多智能体在 ProgramBench 上并未取得更好的结果,但达到中等解决方案的速度提高了 2 倍。https://t.co/2JiaAtxORC

相似文章

WorkBench再访:两年后的工作场所智能体

arXiv cs.CL

本文在WorkBench基准发布两年后再次对其进行评估,显示当前最佳智能体(Claude Opus 4.8)能完成89%的任务,且仅有2.5%的有害副作用,而2024年GPT-4的完成率为43%,有害率为26%。研究发现,能力与安全性同步提升,开放权重模型大幅降低了成本,但一些基本错误仍然存在。

MyPCBench:面向个人智能计算机使用代理的基准测试

Hugging Face Daily Papers

MyPCBench 在模拟的 Linux 桌面环境中,通过真实世界的网络应用评估作为个人助手的计算机使用代理,结果显示 Claude Opus 4.6 的任务完成率最高,达到 55.4%,但在涉及多个应用和长时间操作的任务上仍存在困难。

@_alejandroao: https://x.com/_alejandroao/status/2066548511106076932

X AI KOLs Timeline

一项研究引入了DuoBench,这是一个用于评估编码智能体中规划者-实现者配对的基准测试。它在CPython问题上测试了Kimi K2.7、K2.6、GPT-5.5和Claude Opus 4.8的组合,发现作为实现者的Kimi K2.7以低成本提供高质量,性能优于更昂贵的配对。