来自 arXiv 的文章
该论文提出了一个框架,通过从行为中推导出的语义维度,将多模态大语言模型(MLLM)与人类相似性判断的认知结构对齐,并借助功能磁共振成像(fMRI)数据的探照灯式表征相似性分析(RSA),验证了表征层面人机对齐程度的提升。
该论文提出 TIZSKT 框架,将文本作为索引而非可迁移的预测表征,实现零样本跨域知识追踪,在三个公开数据集的留一域实验中取得最优 AUC 与准确率。
本文提出了 SimXAI,一个以大语言模型(LLM)为核心的轻量级对话层,它用单个支持工具调用的 LLM 替代了 ConvXAI 智能体所使用的多模块 GUS 流水线,并配套提供了一套评估工具;一项仅替换 TalkToModel 对话层的用户研究表明,用户能够以更少的对话轮次、更高的准确率完成任务。
本文提出通过 Word2Vec 轨迹的路径签名来构建句子嵌入,利用粗糙路径理论中的迭代积分显式捕捉词汇结构和词序。实验表明,深度为 2 的路径签名与字符级编辑距离具有很强的相关性(与平均池化不同),同时能在紧凑的 PCA 子空间中保留词序信息。
该论文表明,Matryoshka 表征学习的嵌入前缀与金标准分类体系由粗到细的粒度相对应,并提出了 PEEL,一种极简探针,能够在不同领域中从冻结的嵌入中高保真地解码出分类有向无环图(DAG)。
本文提出了 Stepwise-Querying 方法,在不访问黑盒教师模型内部思维链轨迹的情况下,引导其生成针对各个步骤的解释,并将这些解释整合为训练数据,用于对较小的学生模型进行监督微调。在涵盖两个教师模型、两个学生模型和四个数学/代码基准的 16 项比较中,该方法在 14 项中取得最高分,并引入了 SEIG 诊断指标,用于衡量逐步解释的信息增益。
论文提出 GraphNIAH,一个基于真实引文关系自动构建的长上下文多跳推理基准,用于评估 GPT-5.6、Gemini-3、Qwen3.5 等八个大模型,发现随着推理路径加深,模型准确率显著下降甚至接近随机猜测。
本文表明,重复惩罚解码参数能够在推理时控制基于大语言模型的语法纠错中精确率与召回率之间的权衡,而无需对模型架构、训练或提示词进行任何更改。
该论文表明,大语言模型中的激活引导会在预期效果之外,系统性地改变生成文本的话语层面属性(正式程度、证据使用、歧义性),并提出一种互补向量干预方法,可消除约78%的非预期变化,同时保留约93%的预期引导行为。
该论文介绍了 Saidzoda-Tajik-LFM-2.6B,这是基于 Liquid AI 的 LFM2.5-2.6B-Base 进行塔吉克语适配的模型,旨在配置较低的硬件上实现工具调用,采用 LoRA 持续预训练,随后进行监督微调。塔吉克语工具调用准确率从 20.69% 跃升至 64.14%,但作者表明,持续预训练(CPT)会使模型丧失原生工具调用格式,并导致英语 MMLU 得分下降(从 60.8 降至 52.5)。
BYOD 提出了一种仅使用 LoRA 的方案,可高效地将自回归语言模型转换为扩散语言模型,在冻结所有基础参数的情况下,仅需在单个 Colab GPU 上运行约 3–4 小时,即可完成 Gemma 2 9B、Llama 3.1 8B、Qwen2.5 7B 和 Ministral 8B 的转换。
一项 arXiv 案例研究,探讨专业译者如何通过将工作流程从 Windows 迁移到 Linux 来实现数字主权。
一篇论文提出了一种将焦点损失与监督式对比学习相结合的统一训练目标,用于自动评估欧洲语言共同参考框架(CEFR)等级,并在句子级和文档级的单语及多语基准测试中取得了最先进的结果。
该论文评估了多种基于大语言模型的策略,用于从学术摘要和全文中提取知识实体关系,发现经 LoRA 适配的 T5 模型取得了最高的宏平均 F1 分数,而混合使用小语言模型与大语言模型的策略进一步提升了性能。
一篇研究论文,将长上下文扩散的成本表述为双重预算——注意力图的边数和激活的专家数——提出了 DualBudget 稀疏专家配置,给出了图规模与计算量的界限,并通过评估展示了在最高 16K 上下文长度下的性能提升,以及相较于 DiffuSeq 降低 20% 的成本。
该论文介绍了 KEEPER,这是一项针对四种辅助目标的比较研究,旨在为长时程大语言模型智能体构建足以支持控制的文本记忆。研究发现,与奖励相关的预测能带来最佳任务表现,并提出自一致性偏差,用于衡量递归记忆更新中错误的持续程度。
本文提出了双向 KV 缓存修补方法,用于追踪微调所形成的行为如何在语言模型中实现。研究表明,通过复用 KV 缓存,可以在经 LoRA 微调的模型与其基础模型之间迁移用德语回答或涌现性失对齐等行为,其影响主要集中在系统提示和聊天模板位置等关键词元上。
该论文提出了 BlindToChange,这是一个衡量 AI 搜索智能体能否主动发现近期现实世界中影响其回答的变化的基准测试。研究发现,当请求中未明确提及这些变化时,准确率差距可达 27.5 个百分点。
该论文在 232 篇 ICLR 2025 投稿上,对五种基于大语言模型的评审范式、三种输入表示形式和三个大语言模型进行了对比评估。结果发现:直接评分在经过重新校准后与相对排序结果一致,且 API 调用次数大幅减少;仅使用摘要的输入效果优于全文摘要输入;除 Group Rating 范式外,人类评分在预测论文引用数方面仍优于任何大语言模型范式。
该论文提出了有据生成式语音识别(Grounded Generative Speech Recognition,GSR)这一新范式,将语音识别重新定义为生成语义有据的文本,而非单一转录,并发布了 GSR-Bench 基准与多维评估框架,揭示了转录保真度与生成重构能力之间的权衡及常见失败模式。