AutoDesign:面向长周期智能体设计的元Harness优化

Hugging Face Daily Papers 论文

摘要

AutoDesign 引入了一种元Harness优化器,能够递归改进代码智能体,以完成长周期结构化媒体生成任务,在论文到海报合成任务上取得了最先进的结果,并在新的 PosterBench 基准上超越了 Claude Design 等商业系统。

将多模态源转换为简洁且结构化的媒体输出,从根本上可以看作是一个以模型-Harness系统为中心的长周期智能体过程。尽管理想的Harness系统应当符合人类设计先验,并通过经验探索积累可复用经验,以推动递归自我改进,但现有范式仍然是静态的,无法达到这一能力。在本文中,我们提出了 AutoDesign,一个符合人类设计先验的框架,其中元Harness优化器根据 rollout 反馈引导代码智能体递归改进 Harness。为了实例化和评估该框架,我们聚焦于学术论文到海报生成任务,并推出了 PosterBench,包含覆盖五个学科的100篇论文主轨道(Main Track),以及 PosterBench-mini,一个共享的10篇论文子集,用于受控评估。在 PosterBench 主轨道上,AutoDesign 取得了最高分 78.32,领先闭源商业系统 Claude Design 7.45 分。在七个受控代码智能体-模型配置中,集成学习到的 DesignHarness 持续提升性能,将平均 PosterBench 分数从 54.99 提高到 67.39(+12.4%)。在完全自主的长周期循环中,它在40分钟内执行了253次工具调用和11轮编辑,成本不到3美元,在人工评估中达到了平均会议海报质量。一项系统盲测人工研究进一步表明,AutoDesign 在评估系统中获得了最高的人类偏好。
查看原文
查看缓存全文

缓存时间: 2026/08/14 03:26

论文页面 - AutoDesign:面向长时程智能体设计的元工具集优化

来源:https://huggingface.co/papers/2608.13560 发布于 8 月 13 日

#2 每日论文 (https://huggingface.co/papers/date/2026-08-14) 作者:

,

,

,

,

,

,

,

,

,

,

,

,

摘要

AutoDesign 使用元工具集优化器递归改进用于结构化媒体生成的代码智能体,在论文到海报合成任务上取得了最先进的结果。

将多模态来源转化为精炼且结构化的媒体输出,从根本上可以概念化为一个以模型工具集系统为中心的长时程智能体过程(长时程智能体过程)。虽然理想的工具集系统应当与人类设计先验对齐,并通过实证探索积累可复用经验以驱动递归式自我改进,但现有范式仍然静态,无法达到这一能力。在本文中,我们提出了 AutoDesign,一个与人类设计先验对齐的框架,其中元工具集优化器引导代码智能体基于展开反馈递归地改进工具集。为了实例化和评估这一框架,我们聚焦于学术论文到海报的生成任务,并引入了 PosterBench,其中包括涵盖五个学科的 100 篇论文主轨(Main Track)和用于受控评估的共享 10 篇论文子集 PosterBench-mini。在 PosterBench Main Track 上,AutoDesign 取得了 78.32 的最高分,超越闭源商业系统 Claude Design 7.45 分。在七种受控的代码智能体-模型配置中,集成学习到的 DesignHarness 持续提升性能,将平均 PosterBench Score 从 54.99 提高到 67.39(+12.4%)。在完全自主的长时程循环中,它在 40 分钟内执行了 253 次工具调用和 11 轮编辑,成本不到 3 美元,在人类评估中达到了平均会议海报质量。一项系统盲测人类研究进一步表明,在所评估的系统中,AutoDesign 获得了最高的人类偏好。

查看 arXiv 页面 查看 PDF 项目页面 GitHub7 添加到收藏

在您的智能体中获取这篇论文:

hf papers read 2608.13560

没有最新的 CLI?curl -LsSf https://hf.co/cli/install.sh | bash

引用此论文的模型 0

没有模型链接此论文

在模型 README.md 中引用 arxiv.org/abs/2608.13560,即可从此页面链接它。

引用此论文的数据集 0

没有数据集链接此论文

在数据集 README.md 中引用 arxiv.org/abs/2608.13560,即可从此页面链接它。

引用此论文的 Spaces 0

没有 Space 链接此论文

在 Space README.md 中引用 arxiv.org/abs/2608.13560,即可从此页面链接它。

包含此论文的收藏集 0

没有收藏集包含此论文

将此论文添加到 收藏集 以从此页面链接它。

相似文章

面向长时应用开发的Harness设计

Anthropic Engineering

Anthropic工程师详细介绍了一种多智能体Harness设计,利用生成器与评估器智能体提升Claude在长时间内自主构建完整、高质量前端应用的能力。

来自 Meta 的一篇关于智能体框架(agent harness)优化的优秀论文。Meta-Harness 式的搜索方法只使用一个开发集和一个提议……

X AI KOLs Timeline

# Meta(联合 Duke 与 UC Davis)提出用于智能体 harness 优化的「自改进分支混合」框架 Meta 联合杜克大学(Duke)与加州大学戴维斯分校(UC Davis)提出了一种 **Mixture of Self-Improving Branches(自改进分支混合)** 框架,用于优化智能体 harness(运行框架)。该方法将原本单轨迹的 **Meta-Harness** 搜索拆分为多个**自适应分支**:每个分支拥有不断演进的开发子集(development subsets)和提案策略(proposal policies),并引入一个**路由器(router)**,针对每个输入动态选择表现最佳的分支。 该框架在多个基准上取得了显著提升: - **Olympiad 级别数学任务**:相对提升最高可达 **+34.8%** - **Terminal-Bench 2.0**:提升 **+11.6%** - **SWE-bench Lite**:提升 **+3.8%**

AutoRef:智能体多参考图像生成的执行框架自动优化

Hugging Face Daily Papers

本文提出 AutoRef,一种通过编码智能体在保持模型冻结的前提下自动重写并优化图像生成智能体可执行框架(harness)的方法。由此得到的 AutoRef-Harness 将开源模型 FLUX.2 [klein] 4B 在留出的四参考 MultiBanana 任务上的表现从 5.72 提升至 7.37,达到甚至超越 Nano Banana Pro 和 GPT-Image-1.5 等闭源模型的水平,并且无需重新优化即可迁移到不同的生成器、基准和推理模型上。