来自 arXiv 的文章
该论文提出 PERPL 框架,通过 LLM 模拟读者的相对偏好来学习个性化事实核查解释改写,在保持事实忠实性的同时优于更大的通用 LLM。
Capital One 的 AI Foundations 团队提出了 UCVE——一个领域无关的框架,将合规需求空间建模为上下文需求图(Contextual Requirement Graph, CRG),并基于强化学习加权的拉普拉斯矩阵执行谱重排序(spectral reranking)以完成检索。在三个合规领域的评估中,UCVE 在 matched-K 召回率上较平坦余弦检索提升 4.3%,表现优于多种强检索基线和基于图的基线方法。
本文提出 Multi-Label Agreement(MLA),这是一种用于评估多标签标注任务中标注者间可靠性的灵活框架,采用基于成对 Hamming 一致性的度量方法,并支持多种归一化选项,同时提供了相应的 Python 实现。
该论文提出一种两阶段方法用于ArGuard 2026共享任务中的阿拉伯语有害内容检测:先用GLiNER提取有害相关实体,再将实体与原始文本输入微调后的MARBERT进行分类,在开发集上取得0.886的macro-F1分数。
研究了大语言模型在豪萨语等低资源语言中的安全对齐问题,提出了HausaSafeLM安全偏好数据集,并发现仅靠拒绝率指标无法可靠衡量低资源语言中的模型安全性。
该论文构建了涵盖五种幻觉类型的二元基准(来自六个数据集的9,852个样本),比较了五种决策模型与生成式裁判GPT-6-sol在幻觉检测上的表现,发现决策模型在部分类型上以1-3%的成本匹敌或超越生成式裁判,但在逻辑与指令不一致类型上仍有差距且概率存在过度自信问题。
本文运用机制可解释性工具——包括线性 CKA、logit lens、注意力分解、稀疏自编码器和激活修补(activation patching)——对 GPT-2 与 DistilGPT-2 进行对比分析,揭示了一种压缩-坍缩二分现象:IOI 电路完全坍缩,而 Greater-Than 电路则通过层重映射得以保留。
该论文提出一个结合人工整理词汇表与少量人类范文的框架,利用启用推理的LLM为极低资源乃至未见语言生成流畅文本,为合成数据自举提供了一条实用路径。
提出一种层级低秩重参数化方法,将PEFT方法的可训练参数重组为近似方阵并递归进行低秩分解,可在压缩约一个数量级参数的同时保持甚至提升LoRA/DoRA在常识推理与数学推理任务上的性能。
本文对51个近期多语言基准(涵盖242个数据集、219种语言)进行了数据驱动的审计,从覆盖度、代表性和严谨性三方面揭示了多语言评估的结构性缺陷,如英语中心化翻译、语言覆盖稀薄和基准污染问题,并提出了构建原生、文化相关且抗污染的评估框架的建议。
该论文提出了一种名为 Skim(自键控参数内记忆)的闭式方法,使冻结的语言模型无需外部存储即可将对话内容记忆到模型参数中,并在后续用户提问时从参数中召回答案,在五个语言模型上验证了其可行性。
JevRec受自然语言频率模式启发,将物品编码为可变长度的语义ID,并采用长度与内容预测的独立预测头,从而在基于LLM的生成式推荐中超越TIGER等基线方法。
DocXEval 提出了首个面向多模态文档理解的综合可解释性框架,评估了 13 种 XAI 方法,涵盖 3 项任务、8 个数据集、4 个模型和 17 项指标,发现遮挡法(Occlusion)总体上是忠实度最高且最易于解释的方法。
TrawMem 将 LLM 智能体记忆系统重新定义为面向任务、角色自适应的工作空间,将交互历史组织为线程,并根据记忆在任务中的角色选择互补记忆,在 LoCoMo 和 MemGallery 基准测试中,相较于具有代表性的记忆系统,宏平均 F1 得分稳定提升了 2.23–3.14 个点。
该论文研究了在RAG知识冲突分类任务中使用类型化决策模型替代大语言模型的可行性,结果表明,决策模型在成本仅为其1/4至1/39、延迟更低的情况下,可达到或超过Gemini 2.5 Flash的准确率。
研究人员推出了首个面向巴斯克语的开放语音语言模型,该模型基于 LLaMA-Omni 架构,以 Latxa 为骨干模型,利用翻译数据和文本转语音(TTS)合成数据,克服低资源语言的数据匮乏问题,实现端到端语音交互。
一份技术报告在包含7,354项随机试验的语料库上,将分类标签检索与嵌入检索加大语言模型筛选的两阶段方法进行了比较,发现新方法能够检索到系统综述所纳入证据的92%,而标签检索仅能检索到45%,其成本随检索深度增加而上升。
该研究探讨 LLM 如何结合用户的言语承诺(words)与历史决策记录(deeds)来预测用户在人机对话中的合作/背叛决策,发现 LLM 高度依赖声明的意图但几乎不受对手智能体人格特征影响,导致对被违背的承诺预测准确率大幅下降。
该论文提出了递归知识改进(RKI),将知识改进建模为序列化、状态感知的干预过程,通过辨别知识状态别名问题来指导干预选择,在 HotpotEval 和 SafeInternalEval 上平均提升了 18.41 分。
该论文提出了人格潜变量(Personality Latents,PL)方法,通过生成式潜变量优化,从每个人自己的写作文本中学习其专属潜变量,并将这些潜变量作为软前缀注入冻结的语言模型中,在 MBTI 人格预测任务上取得了 0.782 的 AUC,并实现了 Qwen2.5-3B 与 Llama-3.1-8B 之间的跨模型迁移。