PaperBanana-Interact:基于多轮人类反馈的科学图表优化

Hugging Face Daily Papers 论文

摘要

本文提出了一个基准和一个多智能体系统,旨在通过多轮人类反馈改进科学图表生成,解决了质量漂移和跨修订遗忘等问题。

近年来的研究致力于从论文内容自动生成科学图表(Lin et al., 2026; Zhu et al., 2026a)。然而,在单轮中完全满足作者的视觉和沟通偏好颇具挑战:在我们的形成性用户研究(N = 14)中,所有参与者在查看初稿后都要求进一步修改,且其中86%认为优化后的图表更令人满意。尽管需求明显,多轮工作流仍很大程度上未被充分探索。为了弥合这一差距,我们提出了MTPaperBananaBench,一个用于多轮图表生成的基准,包含292张图像,标注了3,518条用户需求。为了减少昂贵的用户研究并实现可扩展的基准测试,我们构建了一个用户模拟器,在每轮中识别未满足的需求,并将其中k个转换为自然语言反馈。评估需求满足度和整体图表质量揭示了基线多轮系统共有的两个关键失败模式:(1)质量漂移,即图表质量随着轮次逐渐下降;(2)遗忘,即先前实现的功能在后续轮次中丢失。为解决这些问题,我们引入了PaperBanana-Interact,一个通过内部批评-优化循环来优化图表的多智能体系统。PaperBanana-Interact在各轮中始终提升而非降低图表质量,在质量得分上比基线高出11.9-18.6分,并将遗忘减少了3.7-6.2分。
查看原文
查看缓存全文

缓存时间: 2026/09/01 11:49

论文页面 - PaperBanana-Interact:基于多轮人类反馈的科学图表优化

来源:https://huggingface.co/papers/2608.30241

摘要

一个多轮基准与多智能体系统通过减少修订过程中的质量漂移与特征遗忘,提升了科学图表生成效果。

近期研究致力于从论文内容自动生成科学图表(Lin et al., 2026; Zhu et al., 2026a)。然而,要在单轮对话中完全满足作者的视觉与传达偏好颇具挑战:在我们的探索性用户研究(N=14)中,所有参与者在查看初始草图后均要求进一步修改,其中86%的用户认为优化后的图表更为满意。尽管需求明确,多轮协作流程仍鲜有探索。为此,我们推出MTPaperBananaBench——一个包含292张图像及3,518条用户需求的多轮图表生成基准(https://huggingface.co/papers?q=multi-turn%20diagram%20generation)。为减少昂贵的人工研究并实现可扩展的基准测试,我们构建了用户模拟器(https://huggingface.co/papers?q=user%20simulator),该模拟器在每轮交互中识别未满足需求,并将其中k条转化为自然语言反馈。通过评估需求满足度与图表整体质量,我们发现了基线多轮系统共有的两个关键失效模式:(1)质量漂移(https://huggingface.co/papers?q=quality%20drift),即图表质量随轮次增加而逐步下降;(2)遗忘(https://huggingface.co/papers?q=forgetting),即先前实现的特征在后续轮次中丢失。为解决这些问题,我们提出PaperBanana-Interact——一个通过内部批评-优化循环(https://huggingface.co/papers?q=critique-and-refine%20loop)优化图表的多智能体系统(https://huggingface.co/papers?q=multi-agent%20system)。PaperBanana-Interact能在各轮次中持续提升图表质量而非使其退化,在质量评分上超越基线模型11.9-18.6分,并将遗忘问题降低3.7-6.2分。

查看arXiv页面 | 查看PDF | 添加到收藏

引用本文的模型

0个模型关联本文

在模型README.md中引用arxiv.org/abs/2608.30241即可从本页面建立链接。

引用本文的数据集

0个数据集关联本文

在数据集README.md中引用arxiv.org/abs/2608.30241即可从本页面建立链接。

引用本文的Spaces

0个Space关联本文

在Space README.md中引用arxiv.org/abs/2608.30241即可从本页面建立链接。

包含本文的合集

0个合集包含本文

将本文添加到合集即可从本页面建立链接。

相似文章

智能体工作流可视化工具:反馈与修正

Reddit r/AI_Agents

介绍了一款用于可视化AI智能体工作流的工具,支持多种智能体框架,包括Langgraph、CrewAI、AutoGen、Google ADK和OpenAI Agents SDK。创作者正在寻求社区的反馈与修正。

PaperBanana:为 AI 研究者自动化生成学术插图

Papers with Code Trending

PaperBanana 提出了一套自动化流程,利用图像生成模型为 AI 研究者自动生成学术论文插图,展示了科学绘图这一图像生成的新应用场景,并可延伸至技术博客与游戏设计等结构化插图需求。

SciForma:科学图表的结构忠实生成

Hugging Face Daily Papers

介绍了SciForma,一个用于生成具有高结构保真度的科学方法图表的框架,使用多维联合偏好优化(M-DPO)和结构清单来确保在组件、箭头和文本轴上的正确性。该9B模型在基准评估上超越了开源基线和GPT-Image-1.5。