来自 arXiv 的文章
该论文研究语言模型在处理花园路径句后是否会保留被放弃的句法分析残余,发现残余效应主要储存在名词短语的状态中,并可通过激活修补(activation patching)在32B和70B模型中近乎完全消除该残余。
本文系统研究了基于大语言模型的奥林匹克竞赛级数学证明验证,介绍了一个经人工整理的 USAMO 2025 数据集(Trojan-Bench)、一套对抗性证明生成流程(TROJAN),以及一种基于多臂老虎机的评分框架 MABGrader。在对 20 个模型的评估中,MABGrader 的二次加权 Kappa 指标比 ProofGrader 高出 26.4%。
DocSkill提出一种带技能编排策略的智能体框架,用于多语言多跳文档问答,通过MCTS离线探索轨迹并结合SFT/DPO训练策略,同时发布包含60K QA对、覆盖10种语言的MMHop-DocBench数据集。
论文提出了 ChronoFake 基准和 DelSA(文档选择自更新智能体)框架,利用大语言模型提取事件时间线,并结合重排序器筛选证据,以检测通过打乱真实事件的时间顺序构造的时序错乱假新闻,其表现优于现有方法。
论文提出 CAMR(兼容性感知记忆回放)框架,通过兼容性检查与学习到的记忆门控联合决定当前样本的监督与历史样本回放策略,在 Qwen3-8B-Base 上实现了持续事实更新与跨任务学习的更优稳定性和保持能力。
《PsyJev:基于系统1判断的心理分析》提出了一种针对社交媒体自我披露内容的心理分析框架PsyJev,以及包含13个标注数据集和82个问题的基准PsyJudgeBench。该方法通过联合监督训练和判断锚定的RLCD优化,在Qwen3.5模型上实现了显著优于最强外部基线的心理判断性能。
ReliMorph 提出一个可靠性引导的对称框架,将局部对应评估与空间专家路由及残差速度门控耦合,用于 3D 可变形医学图像配准,并在单模态和多模态任务上超越现有方法。
本文提出一种将评审者、过滤器与写作者分离的 harness 架构,通过上下文隔离减少 LLM 代理在扩写报告时的过度防御性写作,在 25 个商业项目草稿实验中将防御性命题从 59 降至 2(减少 96.61%),并将源主张保留率从 80.35% 提升至 93.12%。
提出以种群为中心的进化(PCE),通过将整个智能体种群的成功、失败与自修改历史蒸馏为“种群信息块”来指导父代运行框架的改进,在 SWE-bench Verified 上达到 72.1%、Polyglot 上达到 96.7%,显著优于群体进化基线。
本文提出DiscernMem,一个免训练框架,通过缺陷感知记忆精炼与边界学习元记忆机制,帮助基于LLM的多智能体系统修正有缺陷的记忆并学习何时正确使用记忆,在AutoGen、CAMEL和MacNet上取得最佳平均分。
该论文用信号处理工具审计了 DeepConf 等基于 token 置信度的推理链筛选方法,发现滑动窗口最小置信度分数主要度量的是链的长度,剔除长度因素后该分数对正确性几乎不携带额外信息,按长度排序效果相同甚至更好。
这篇 arXiv 论文分析了 2019 年至 2026 年间的逾 500 万个网页,发现含有 AI 生成文本的网页占比从 2022 年之前的接近于零,上升至 2026 年 8 月的近 25%。这一增长并不均衡:英语网页和 .com 域名网站中 AI 文本的普及程度高于其他语言的网页或 .gov/.edu 域名网站,而且 AI 文本集中在网络图中中心性最低的网页上。这些估计值通过贝叶斯分层模型得出,并校正了检测器的错误率。
研究训练小规模GPT-2模型于儿童日常语音转录(BabyView)和合成儿童导向对话(TinyDialogues)数据上,发现模型会显著特化于特定儿童的语言环境,多儿童数据能提升对混合留出语言的预测但对语法基准改进有限,表明小数据语言学习不仅取决于数据量,还取决于环境来源与匹配度。
本文提出了一种量化方法,用于衡量前沿大语言模型中的阿希从众效应:通过对同一问题反复采样,构建呈现人为制造的共识前后的回答分布,证实前沿模型确实会表现出从众行为,并刻画了这种行为在何种情况下发生及其程度。
该预印本提出 BIEvolve,通过契约引导的静态依赖分析与跨批次数值一致性动态验证,为 LLM 内核生成代理加入批不变性(BI)保障,将 BI 通过率从 67.6% 提升至 91.9%,同时保留 91.8% 的基线加速收益。
本文提出了一种小型候选形式化模型,使用教师模型离线生成的列表进行训练,以弥合开放式大语言模型工作负载与快速决策模型之间的接口鸿沟。据报告,该方法在 CALVIN-D 上的任务成功率最高达 52.6%,端到端延迟为 2.09 秒;相比之下,不使用该形式化模型时的成功率为 11.8%,而 Qwen3.5-27B 等基线模型的速度则更慢。
研究者通过使用大语言模型翻译英文语料,构建了日语 SDRT 语料库,并对比了基于提示和微调的大语言模型在日英语篇解析上的表现,发现两者性能相近,表明 SDRT 语篇解析具有跨语言适用性,且模型更依赖上下文语篇关系而非话语标记词。
论文提出了 InfraDev 基准,包含 36 个源自 Megatron-LM、vLLM 和 verl 真实 PR 的任务,用于评估编码代理开发生产级 AI 基础设施的能力。目前表现最佳的前沿模型仅能解决 38.9% 的任务,揭示了代理在分布式系统开发中的显著短板。
本文提出了“数据驱动的行动追索”(DDAR),这是首个无需高成本人工监督即可为机器学习决策系统生成可执行追索方案的方法。该方法通过对用户历史轨迹构建动态模型,寻找成本低、合理可行且能实现预期结果的行动。
提出一个基于LLM代理的多语言ASR数据采样框架,通过语言学感知的错误驱动优化在12种Common Voice语言上以更少数据和算力超越全数据训练效果,并显著加速收敛。