来自 arXiv 的文章
本文介绍了智能体软令牌压缩（Agentic Soft-Token Compression，ASTC），这是一种无需训练的方法，利用大语言模型原生的循环动态机制（GDN-attention），将智能体的长时程上下文压缩为软令牌，在注意力对数量最多减少 50.68% 的情况下，达到或超过未压缩时的准确率。
本文提出 PsyInterviewee，通过分离受保护的真相通道与动态交互通道，在心理健康面试模拟中同时保持临床事实的信息不变性与互动的关系适应性，并在自动化评估中优于四个代表性基线。
该论文提出了 AICG，一种具备 AI 感知能力、受认知监督的双分支框架，用于自动评阅数学简答题。该框架将基于 RoBERTa 的评分、Q 矩阵技能预测与生成式 AI 检测器相结合，对不可靠的作答进行加权处理。与 RoBERTa 回归模型相比，其平均绝对误差（MAE）降低了 50.3%，二次加权 Kappa（QWK）从 0.798 提升至 0.927。
TraceSpec 是一个将 LLM 智能体轨迹评估与用于推测解码的自适应草稿模型训练相结合的框架，引入了 TraceSpec-Traj 语料库，并在多种模型规模下，相较于其 DSpark 基线将回放吞吐量提升了 12.5% 至 22.6%。
该论文提出了 S2TDR，一种结构化多模态框架，通过视觉线索提取、情感意图推断和上下文感知重构，将对话中的贴纸轮次转换为符合语境的文本。与直接整合贴纸相比，该框架提升了下游情感分析、意图识别和摘要生成任务的表现。
HyperRepair 是一种框架，仅需推理成本即可恢复微调语言模型的通用能力，同时保留其领域专长。它利用超网络，根据激活指纹生成修复侧网络（Repairing Side Net）。该框架在两个模型家族、12 个 LoRA 适配数据集和 15 项通用基准上进行了评估，通用能力得分达到基础模型的 93.4%，同时保留了微调模型 99.5% 的领域性能。
这篇 arXiv 论文发现，语言模型在归责时表现出“女性都很美好”偏见：既对被评判的女性更宽容，也在行为影响到女性时作出严厉得多的判断。该结论基于四个模型对来自 r/AmItheAsshole 的 11,270 个反事实冲突情境的评判。
EDU-Jev 推出了一系列单次前向传播的“系统一”决策模型（0.8B/2B/4B），可针对教育评估任务输出固定选项的概率分布，在十二项基准测试中达到 67.6% 的平均准确率，比领先的商业决策 API 高出 9.4 个百分点。
该论文研究了RAG系统中的从众偏差：当检索到的多数文档是互相一致的投毒文档时，Gemma-3-12b检测中毒声明的能力从25%显著下降至10%，表明语言模型会随附多数证据而忽视事实核查。
该论文提出了 Bilal-Bench，这是一个包含 240 道题、经专家验证的孟加拉语基准，用于评估开放式伊斯兰文献来源编造问题。论文评测了七个开放权重模型（参数量为 10 亿至 1200 亿），发现其中六个模型在 79.3%–95.3% 的要求提供文献来源的问题上会自信地编造来源，且表现并未随模型规模增大而单调改善。
本文表明，在推理时将 GPT-2-XL 中 729 个对任务而言冗余的注意力头置零，可使逐字记忆减少 91.5%，同时略微改善 WikiText-103 上的困惑度，为缓解大语言模型的隐私泄露提供了一种无需训练的方法。
本文表明，在对话式 RAG 基准测试中，使用不完整的相关性标注作为评估拒答的捷径，会系统性地扭曲评估结果：更强的检索器会产生更多仍包含答案的“虚假漏检”上下文，导致可回答性 AUROC 被严重低估。作者公开了代码、运行结果和标注，并建议依据基于内容的标注来评估拒答，而非依据标准答案文档是否出现。
Meta 超级智能实验室的研究人员将“认知不确定性下的自适应个性化”形式化，并推出一项多语言基准测试，揭示了大语言模型在策略识别与生成之间的差距：尽管模型能够识别恰当的策略，却仍默认采取利用优先的行为；针对内部策略表征的定向训练缩小了泛化差距。
CoFiBreak 提出一种粗到细的多样性奖励机制用于 GRPO 训练的多轮越狱攻击，在保持高效攻击的同时显著提升攻击策略多样性，并可迁移到未见过的前沿模型。
Qistas 是一种经过预注册的可移植协议，用于评估大语言模型在一个社会的不同社会群体、宗教派别和地区群体中的公平性，首个实施场景为伊拉克。本文公开了编制工具，并报告了对包含 58 个条目的种子库所进行的语义审查——目前尚未评估任何模型，研究假设和分析计划已通过预注册预先确定。
该论文在训练预算相同的条件下，比较了连续扩散语言模型（LangFlow）和推测式草稿模型（DSpark）作为独立生成器的表现，发现当序列较长时，LangFlow 在困惑度和 MAUVE 指标上表现更优，而当序列长度为 16 时，DSpark-RNN 领先，凸显了对整个序列进行迭代优化这一关键优势。
微软 Mage 团队推出 Mage-VL-Cowork，这是一套用于学习混合式计算机操作的完整训练方案（包括基于演化后的执行框架进行数据合成、多阶段监督微调，以及在线混合强化学习），其中的 4B 模型在 OSWorld-Verified 上取得了相对于其规模而言的优异成绩。
该论文提出了 Li2SAO，一种用于大语言模型后训练的轻量级异步强化学习方法。该方法先使用组相对演员-评论家自举来预热评论家，再切换到单次轨迹采样的广义优势估计（GAE），在训练早期即可追平或超越 GRPO，并提高后期的性能上限。
杜克大学研究人员推出了 StormGen，这是一种生成式机器学习模型，能够将短时段降雨观测记录补全为完整且符合物理规律的风暴生命周期，再现哈维飓风等罕见极端事件，并且在防洪设施压力测试中优于随机风暴移置法。
本文提出了分位数传播规划（QPP），通过动力学传播一组固定的扰动分位数，在有限的模型评估预算下评估均值和尾部风险。结果表明，在过载和库存任务中，与均值轨迹规划相比，该方法降低了尾部成本和约束违反次数。