error-severity

本文介绍了Errorquake-10k，这是一个用于评估开放权重大语言模型中错误严重性的基准，表明具有相同准确率的模型可能具有截然不同的错误严重性分布，并主张在报告准确率的同时也应报告严重性。