标签
该论文提出了一个针对法语表层变体(省略撇号、去除变音符号、键盘输入错误)的受控基准,涵盖七项任务,共包含12,600个输入。结果表明,随着扰动强度增加,准确率下降,Brier分数和负对数似然(NLL)上升,而将校准与输入还原相结合可提高可靠性。
本文介绍了FrenchNews-7,一个用于跨多个发布者分类法国新闻编辑部的基准,特点是一个微调的CamemBERT分类器以及与LLM基线的评估。