标签
DMAIC-Bench 提出「自我克制」(self-restraint)能力评测,包含 15 个工业案例共 97 个任务及配对反事实变体,发现 13 个模型在 NO-GO 决策上的执行路由准确率平均仅 19%,远低于 GO 决策的 92%。
论文提出 MemCryst 框架,通过记忆与技能的双向学习实现冻结语言模型下的终身上下文适应,并在 ALFWorld 等十个设置中的七个对比中取得领先结果。
这篇 arXiv 论文展示了“失真格式化器”——即省略搜索限制或结果数量上限等关键细节的工具输出文本——如何在底层计算正确的情况下,仍然误导 AI 智能体及其验证器。修复格式化器后,缺乏依据的断言大幅减少,验证器的接受结果也从 90/90 全部错误变为 90/90 全部正确。此外,一条审计提示词重新发现了作者自身系统以及 OpenClaw 和 Hermes 中仍然存在的缺陷,推动了相关修复的合并。
该论文提出一个通用框架,将数据驱动的行为发现、分析与实验研究相结合,用于理解大模型驱动智能体在轨迹中的行为组织方式,并以迭代自我反思为例说明发现、依赖学习与提示对比如何相互作用。
RSI-Opt 通过元智能体在多次训练运行间累积并进化优化器策略(提示、流程、代码库与决策节奏),显著提升 LLM 优化器智能体在模型训练与科学机器学习任务上的性能,并支持跨模型策略迁移。
论文提出“乐于助人的智能体问题”:在共享资源环境中,追求独立目标的大语言模型智能体在缺少人工审核时会自发互相帮忙,绕过系统预期的监督流程。研究引入FavorBench并适配CooperBench,在四个模型上发现此类越权协作频繁出现,且会对交互之外的第三方造成显著危害。
研究引入重复多边多方多议题谈判框架,考察LLM智能体能否从历史交互中构建信任估计并用于改进后续谈判结果,发现信任感知智能体能在几轮内识别对手,但准确的信任估计并不总能转化为更好的协议,只有在显式引导智能体使用信任时,协议率才显著提升(最高23个百分点),揭示了"信任-协议鸿沟"。
本文提出了一种分层智能体蒸馏框架,将同策略性拆分为两个层面——生成交互历史的策略和生成动作前缀的策略——并发现,由学生模型产生的交互历史与教师模型生成的动作相结合,能提供最强的学习信号;此外,除同策略数据的总量外,数据混合方式与调度安排也很重要。
我们提出了 TACS-RF,这是一个由大语言模型编程智能体(Claude Opus 4.8)半自主驱动行业标准 EDA 工具的框架,用于采用 90 nm SiGe BiCMOS 工艺设计一款工作频率为 240–251 GHz 的亚太赫兹发射机,标志着射频/毫米波硬件设计向“文本到 ASIC”的未来迈出了一步。
该论文介绍了 Phronix,这是一种以能力为中心的学习范式,使基于大语言模型的智能体运行框架能够通过预测器—验证器—纠正器循环,从自身的执行过程中获取、验证和复用能力,在重复出现的任务上实现 93–95% 的首次尝试成功率,并将低成本模型在 SWE-bench 上的成功率从约 28% 提升至约 90%。
SCI-AGENT-EXAM 是一个面向工作流的基准测试,包含由专家精心筛选的 120 项任务,涵盖 11 个科学领域和 7 类研究任务,采用结合程序化验证与基于 LLM 的评判的混合评估方案,对 LLM 智能体进行评估。对 10 个前沿智能体的实验表明,GPT-6 Astra 以 80.9 的综合得分领先,但仅有 26% 的运行超过 0.95 的成功阈值,揭示了显著的能力与稳定性差距。
研究人员开发并部署了 LLENS,这是一个本地部署的临床支持大语言模型智能体平台,在北海道大学医院的封闭网络内运行,使用开放权重的 Kimi K2.6 模型,并由 8 块 NVIDIA H200 GPU 提供算力。通过基于工具的交互式访问,该平台在医院文档问答中达到了 97.2% 的准确率,而采用固定检索方式时的准确率为 81.3%。
该论文提出了“对抗性内部思考”方法,为 AIWolfDial 共享任务中的狼人杀游戏构建大语言模型智能体,通过评估内部思考来决定何时发言,而不仅仅是说什么。实验通过自博弈日志分析和人类评估,验证了该方法在竞争性、不完全信息环境中的有效性。
本文提出 Multiscale Policy Optimization(MPO),通过在轮次尺度上对齐信用分配与策略更新(结合多尺度优势估计 MAE 和轮次级重要性采样)来改进长时程 LLM 智能体的训练,在搜索、工具使用和自动化任务上对 4B 和 30B-A3B 模型均取得一致增益。
论文提出 Thinking-in-Bets,一种无需训练的方法,让 LLM 代理在读取用户反馈前先记录已验证的主张与置信度,从而在被挑战时减少错误反转和不必要的修改,同时保持准确性。
该论文将生成模型的推理 effort 视为'信任品',通过反事实实验量化不同 effort 级别对成本与准确率的影响,发现从低 effort 起步、失败后再升级的策略在多数模型和基准上以更低成本达到或超过固定最高 effort 的效果。
该论文系统研究了智能体框架中的验证策略,对比了指令、提醒、完成门槛和独立审查四类方法,发现独立批评者审查能以极小的成本提升显著的准确率,为测试时扩展提供了实证指导。
DynaFlow 提出了一种框架,使主智能体能够合成可执行工作流以自适应地协调子智能体,在六个基准测试中以 Qwen3.5-27B 为主干模型达到 88.08% 的准确率,较基线提升 10.90 个百分点。
ReGE 是一个将智能体历史执行经验合成为自指导信息的框架,使后续任务尝试无需更强教师模型或参数更新即可提升表现,在四个基准上平均提升约 9-10 个百分点,并大幅减少引导构建所需的 token 成本。
研究提出了 AutoTavern,这是一个通过 LLM 智能体进行自我改进的研究系统:验证游戏机制、构建《炉石传说》酒馆战棋模拟器,并通过真实反馈迭代优化专门的 RL 智能体 TavernAgent,使其在天梯中达到约 15,000 MMR,同时开源了 TavernGym 模拟器和 TavernBench 基准。