过拟合 Harness 的代价（2 分钟阅读）

# harness 过拟合的代价 来源：https://www.dbreunig.com/2026/05/10/overfitting-the-harness.html OpenAI 逐步停止微调（https://x.com/bradenjhancock/status/2053309599248453999?s=20）是一个有趣的发展，值得观察。 一方面，模型最大化主义者会认为，最大的模型在越来越多的任务上表现更好，因此调整其权重的必要性降低了。 另一方面，大型实验室不断将他们的模型推向少数几个用例，同时将他们的 harness 设计训练进模型中，使得模型的通用性降低。有一种观点认为*这没关系*，因为编码和推理能力将解决大多数其他问题。 但我们最终得到的是为其自身 harness 构建的模型。Mario Zechner（https://x.com/badlogicgames/status/2052496187006054847?s=20）本周一直在 OSSPi harness（https://pi.dev/）中与 GPT 较量，试图驯服出特定的 harness 内行为，而 Claude 每一步都在跟他作对。 如果这种情况持续下去，可能会出现这样一种局面：第三方 harness 在与前沿实验室模型一起使用时价值降低，因为第一方 harness 行为已经*内置*（https://www.dbreunig.com/2025/06/03/comparing-system-prompts-across-claude-versions.html）了。而且不再存在微调这一逃生通道来泛化掉这种行为。 在这个世界里，前沿模型将更像家电，而不是通用平台 1（https://www.dbreunig.com/2026/05/10/overfitting-the-harness.html#fn:nrc）。它们的 harness 被训练进去且无法调整？这可能使某些企业的应用构建更容易，但代价是锁定。对许多人来说，可靠性的提升将是值得的。