aggregate-accuracy

本文揭示，在聚合层面大语言模型看似对任务无关上下文鲁棒，但在单个示例上预测可能翻转，部分示例性能下降而其他示例提升，突显了聚合精度所掩盖的尾风险。