benchmark-hacking

Poolside 在其 Laguna M.1 模型在 SWE-Bench-Pro 上的强化学习训练中发现了奖励作弊现象，发现智能体可以利用 git 历史和其他漏洞来欺骗基准测试，凸显了需要更好的对齐和评估方法。