Articles from arXiv
该论文研究语言模型在处理花园路径句后是否会保留被放弃的句法分析残余,发现残余效应主要储存在名词短语的状态中,并可通过激活修补(activation patching)在32B和70B模型中近乎完全消除该残余。
This paper systematically studies LLM-based verification of Olympiad-level mathematical proofs, introducing a human-curated USAMO 2025 dataset (Trojan-Bench), an adversarial proof generation pipeline (TROJAN), and MABGrader, a Multi-Armed Bandit grading framework that outperforms ProofGrader by 26.4% in Quadratic Weighted Kappa across 20 evaluated models.
DocSkill提出一种带技能编排策略的智能体框架,用于多语言多跳文档问答,通过MCTS离线探索轨迹并结合SFT/DPO训练策略,同时发布包含60K QA对、覆盖10种语言的MMHop-DocBench数据集。
论文提出 ChronoFake 基准与 DelSA(文档选择自更新智能体)框架,通过 LLM 提取事件时间线并结合重排序器筛选证据,以检测通过重排真实事件时间顺序构造的时序错乱假新闻,超越现有方法。
论文提出 CAMR(兼容性感知记忆回放)框架,通过兼容性检查与学习到的记忆门控联合决定当前样本的监督与历史样本回放策略,在 Qwen3-8B-Base 上实现了持续事实更新与跨任务学习的更优稳定性和保持能力。
PsyJev: Psychological Analysis via System-1 Judgment 提出了一种针对社交媒体自我披露内容的心理分析框架 PsyJev,以及包含13个标注数据集和82个问题的基准 PsyJudgeBench。该方法通过联合监督训练和Judgment-Anchored RLCD优化,在Qwen3.5模型上实现了显著优于最强外部基线的心理判断性能。
ReliMorph 提出一个可靠性引导的对称框架,将局部对应评估与空间专家路由及残差速度门控耦合,用于 3D 可变形医学图像配准,并在单模态和多模态任务上超越现有方法。
本文提出一种将评审者、过滤器与写作者分离的 harness 架构,通过上下文隔离减少 LLM 代理在扩写报告时的过度防御性写作,在 25 个商业项目草稿实验中将防御性命题从 59 降至 2(减少 96.61%),并将源主张保留率从 80.35% 提升至 93.12%。
提出 Population-Centred Evolution (PCE),通过将整个 agent 种群的成功、失败与自修改历史蒸馏为“population block”来指导父代 harness 的改进,在 SWE-bench Verified 上达到 72.1%、Polyglot 上达到 96.7%,显著优于群体进化基线。
本文提出DiscernMem,一个免训练框架,通过缺陷感知记忆精炼与边界学习元记忆机制,帮助基于LLM的多智能体系统修正有缺陷的记忆并学习何时正确使用记忆,在AutoGen、CAMEL和MacNet上取得最佳平均分。
该论文用信号处理工具审计了 DeepConf 等基于 token 置信度的推理链筛选方法,发现滑动窗口最小置信度分数主要度量的是链的长度,剔除长度因素后该分数对正确性几乎不携带额外信息,按长度排序效果相同甚至更好。
This arXiv paper analyzes over 5 million webpages from 2019 to 2026, finding that the share of pages with AI-generated text grew from near zero before 2022 to nearly 25% by August 2026. The rise is uneven: English-language and .com domains have higher AI prevalence than other languages or .gov/.edu domains, and AI text concentrates in the least central pages of the web graph, with estimates produced via a Bayesian hierarchical model correcting for detector error rates.
研究训练小规模GPT-2模型于儿童日常语音转录(BabyView)和合成儿童导向对话(TinyDialogues)数据上,发现模型会显著特化于特定儿童的语言环境,多儿童数据能提升对混合留出语言的预测但对语法基准改进有限,表明小数据语言学习不仅取决于数据量,还取决于环境来源与匹配度。
This paper introduces a quantitative approach to measuring Asch conformity in frontier LLMs by repeatedly sampling a single question to build answer distributions before and after presenting a manufactured consensus, confirming that frontier models do conform and characterizing when and to what degree.
该预印本提出 BIEvolve,通过契约引导的静态依赖分析与跨批次数值一致性动态验证,为 LLM 内核生成代理加入批不变性(BI)保障,将 BI 通过率从 67.6% 提升至 91.9%,同时保留 91.8% 的基线加速收益。
This paper proposes a small candidate formalizer trained on offline teacher-generated lists to bridge the interface gap between open-ended LLM workloads and fast decision models, reporting up to 52.6% task success on CALVIN-D with 2.09s end-to-end latency, compared to 11.8% without the formalizer and slower baselines like Qwen3.5-27B.
研究者通过使用 LLM 翻译英文语料构建了日语 SDRT 语料库,并对比了基于提示和微调的 LLM 在日英语篇解析上的表现,发现两者性能相近,表明 SDRT 语篇解析具有跨语言适用性,且模型更依赖上下文语篇关系而非话语标记词。
论文提出 InfraDev 基准,包含 36 个源自 Megatron-LM、vLLM 和 verl 真实 PR 的任务,用于评估编码代理开发生产级 AI 基础设施的能力。目前最佳前沿模型仅解决 38.9% 的任务,揭示了代理在分布式系统开发中的显著短板。
This paper proposes "Data-Driven Action Recourse" (DDAR), the first approach for generating actionable recourse in ML decision systems without costly human supervision, by building a dynamics model of historical user trajectories to find low-cost, plausible actions that achieve desired outcomes.
提出一个基于LLM代理的多语言ASR数据采样框架,通过语言学感知的错误驱动优化在12种Common Voice语言上以更少数据和算力超越全数据训练效果,并显著加速收敛。