ProgAgent:通过程序化训练学习工具编排
摘要
ProgAgent 提出一个完整的程序化工具调用(PTC)训练框架,通过可验证的长时程任务合成、轻量级 PTC 运行时和两阶段训练配方,显著优于同规模基线,在 LOCA-bench 64k token 状态下达 30.7% 通过率而基线为零。
查看缓存全文
缓存时间: 2026/10/15 07:02
论文页面 - ProgAgent:通过程序化训练学习工具编排
来源:https://huggingface.co/papers/2610.14774
摘要
大语言模型(LLM)日益被期望在长时程任务中编排多种工具。现有智能体通常采用直接工具调用(Direct Tool Calling, DTC)方式,即模型按顺序调用工具,而工具的响应会不断累积在模型上下文中,这可能导致上下文退化(context rot)和编排失败。与之相对,程序化工具调用(Programmatic Tool Calling, PTC)通过可执行代码调用工具,并将中间结果存储在运行时变量中,而非追加到上下文里。此前的研究主要将 PTC 作为推理时的优化手段,但其在智能体训练中的益处尚不明确,且适合的可验证训练任务十分稀缺。
在本工作中,我们提出了 ProgAgent,一个完整的 PTC 训练流程,包含一个合成可验证长时程任务的流水线、一个轻量级 PTC 运行时,以及一个两阶段训练方案。仅使用在四种环境规模下实例化的 215 个任务,ProgAgent 在四个基准测试中的通过率均高于规模相当的已评估基线。在 LOCA-bench 上,ProgAgent-14B 在 64k token 的环境状态下取得了 30.7% 的通过率,而这些基线的得分均为零。跨运行环境的实验表明,无论采用哪种评估接口,经过 PTC 训练的模型都优于经过 DTC 训练的模型,这表明 PTC 训练的收益超越了接口本身。
查看 arXiv 页面 (https://arxiv.org/abs/2610.14774) 查看 PDF (https://arxiv.org/pdf/2610.14774) 项目页面 (https://llleoli.github.io/ProgAgent) GitHub (https://github.com/hkust-nlp/ProgAgent) 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2610.14774)
在你的智能体中获取此论文:
hf papers read 2610.14774
没有最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用此论文的模型 0
没有模型链接此论文
在模型 README.md 中引用 arxiv.org/abs/2610.14774 即可从此页面链接。
引用此论文的数据集 0
没有数据集链接此论文
在数据集 README.md 中引用 arxiv.org/abs/2610.14774 即可从此页面链接。
引用此论文的 Space 0
没有 Space 链接此论文
在 Space README.md 中引用 arxiv.org/abs/2610.14774 即可从此页面链接。
包含此论文的收藏 0
没有收藏包含此论文
将此论文添加到收藏 (https://huggingface.co/new-collection) 即可从此页面链接。
相似文章
低延迟系统中工具制作与自进化LLM代理
本文提出了一种方法,将重复的标准操作流程步骤编译为经过验证、有版本管理的工具,在部署前完成,替代推理时的代码生成。在一个配送中心的报警分类系统中,该方法将p50延迟降低了42%,端到端错误率降低了最多53%。
推测性编程工具调用(12分钟阅读)
本文提出推测性编程工具调用(sPTC),一种优化AI框架中工具调用的技术。它受CPU和大语言模型中推测执行的启发,通过重叠执行与令牌生成来降低延迟。
Long-Horizon-Terminal-Bench 2.0:自动化构建多样化任务并衡量智能体的持续进展
LHTB 2.0 介绍了一个扩展的长时程终端基准,包含 77 个跨 13 个领域的任务,通过自动化任务构建流水线和密集进度阶梯来衡量 AI 代理在长达三小时工作流中的持续进展,GPT-6-astra 以 0.69 的密集平均奖励领先。
@a1zhang: 介绍 Speculative Programmatic Tool Calling (sPTC)!一种用于推测工具调用的一般技术类。
介绍 Speculative Programmatic Tool Calling (sPTC),一种在代码生成期间推测工具调用的技术,以与令牌生成和执行时间重叠,提高 AI 框架中的效率。
@mylifcc: 重磅实验:让 LLM 当「优化代理」自动调度循环! 刚读完这篇刚接受 PACT 2025 的论文:《Agentic Auto-Scheduling: An Experimental Study of LLM-Guided Loop Opt…
介绍一篇被PACT 2025接受的论文,提出了ComPilot框架,利用现成LLM作为优化代理,无需微调即可自动优化复杂循环嵌套,几何平均加速达3.54倍,超越SOTA Pluto。