标签
MedDDC-Eval引入了一个针对多轮医疗咨询智能体的诊断解耦评估测试平台，将策略引导的对话历史与诊断生成分离，以实现对证据获取和诊断有用性的更清晰测量。
本文介绍了“二阶偏见”，即LLM在判断有偏见内容时所表现出的偏见，并提出了一种基于认识论权利的推理任务来评估它。实验表明，该任务能够规避安全护栏，并揭示LLM评判者中系统性的群体偏见。
本文利用平行圣经翻译引入了一种受控内容重叠设置，用于评估风格分类器在多大程度上依赖内容线索而非实际风格特征。结果表明，当移除内容线索时，低重叠模型性能下降，而高重叠模型则迁移得更为稳健。