llm-classifier

WikiStar 是一个利用 LLM 分类器对维基百科文章修订历史中具有科学意义的编辑进行标注的系统，使用户能够交互式地探索科学知识如何随时间演变。该系统包含一个基准数据集，并通过领域专家的用户研究进行了验证。

反思基于LLM的自动化支持在出现错误时如何导致信任问题，强调验证和可审计性比单纯提高准确性更重要。

文章指出，即使一个准确率高达92%的LLM分类器，也会因其错误难以解释和修复而削弱信任，强调了构建可验证和可审计的AI系统的必要性。