标签
本文通过采用以大语言模型为先、人工仲裁的评估方法重新评估幻觉检测数据集，研究了标准基准是否低估了大语言模型（LLM）的性能。研究发现，在仲裁过程中融入大语言模型的推理能力可以提高评估的一致性，并表明针对容易产生歧义的任务，采用模型辅助的重新评估能产生更可靠的基准。
本文认为，人工智能充当着“认知放大器”的角色，将瓶颈从执行层面转移至想象力层面，并形成一种可能导致人类意图与机器智能融合的反馈循环。文章强调，保持这些系统的开放性和广泛可用性至关重要，而非将其集中化。