标签
本文构建了 Guise 跨语言基准,揭示叙事包装会显著提升大语言模型的越狱成功率(在 Qwen3-1.7B 上使用文言文时高达 95.7%),并提出了 AXIS 防御方法,该方法结合偏好优化与轮换和承诺目标,在 Qwen3 和 GLM-4 系列模型上取得了最佳的安全性-可用性综合得分。
Q2D-Web是一个大规模的基准和排行榜,用于评估网络搜索中的检索模型,具有1.9亿文档和查询,涵盖十种语言,并采用方法以最小化偏差并降低评估成本。
介绍ALEE,一个使用抽象意义表示生成具有受控语义偏移的英语极小对的框架,并将其翻译用于评估275+种语言的文本嵌入,揭示了跨语言语义表示中持续存在的差距。
一项研究评估了六款商业AI聊天机器人在基于BBC新闻的六种语言事实性问题上的表现,发现多项选择题准确率高,但自由回答准确率显著下降,其中检索错误导致超过70%的失败,并揭示了区域偏差。