MTEdit:打包轨迹优于逐步回滚的多轮图像编辑
摘要
MTEdit 引入了一个 500K 规模的多轮图像编辑数据集,通过打包轨迹画布生成来减少视觉漂移,并提出 MTEdit-Bench 基准;实验表明微调 Qwen-Image-Edit-Causal 可获得最佳的开源多轮图像编辑性能。
查看缓存全文
缓存时间: 2026/10/19 11:28
论文页面 - MTEdit:打包轨迹在多轮图像编辑中优于逐步展开
来源:https://huggingface.co/papers/2610.23751
摘要
MTEdit 是一个大规模多轮图像编辑数据集,采用打包轨迹画布(packed trajectory canvas)生成方式来减少视觉漂移,从而构建出更优的多轮图像编辑模型,并在 MTEdit-Bench 上进行了评估。
多轮图像编辑(https://huggingface.co/papers?q=Multi-turn%20image%20editing)旨在根据一系列指令对图像进行修改,相比单轮编辑,更契合人机协同创作的需求。然而,构建高质量的多轮训练数据仍然充满挑战,因为传统的顺序展开(rollout)方式会累积误差,并在编辑各轮之间引入视觉质量漂移(https://huggingface.co/papers?q=visual-quality%20drift)。为应对这一挑战,我们提出了 MTEdit(https://huggingface.co/papers?q=MTEdit),这是一个多轮图像编辑(https://huggingface.co/papers?q=multi-turn%20image%20editing)数据集,其构建流程以打包轨迹画布(https://huggingface.co/papers?q=packed%20trajectory%20canvas)(PTC)生成为核心。通过在统一的视觉上下文中联合生成多个编辑状态,该流程有效降低了各轮之间的视觉质量漂移(https://huggingface.co/papers?q=visual-quality%20drift)。MTEdit(https://huggingface.co/papers?q=MTEdit)涵盖逐步编辑和上下文感知编辑两种场景,包含 50 万条多轮图像编辑(https://huggingface.co/papers?q=multi-turn%20image%20editing)轨迹,每条轨迹最多 8 轮、平均 5.38 轮,是规模最大的多轮图像编辑(https://huggingface.co/papers?q=multi-turn%20image%20editing)数据集之一。我们进一步提出了 MTEdit-Bench(https://huggingface.co/papers?q=MTEdit-Bench),这是一个基准测试,通过评估模型遵循编辑指令、保持内容一致性、抵抗视觉质量漂移(https://huggingface.co/papers?q=visual-quality%20drift)以及跨轮次有效利用历史上下文的能力,来对上述两种场景进行评测。我们使用 MTEdit(https://huggingface.co/papers?q=MTEdit)对 Qwen-Image-Edit-Causal(https://huggingface.co/papers?q=Qwen-Image-Edit-Causal)进行微调,得到 Qwen-Image-MTEdit(https://huggingface.co/papers?q=Qwen-Image-MTEdit)。在 MTEdit-Bench(https://huggingface.co/papers?q=MTEdit-Bench)上,我们评测了广泛的闭源和开源图像编辑模型,其中包括 Qwen-Image-MTEdit(https://huggingface.co/papers?q=Qwen-Image-MTEdit)。实验结果表明,Qwen-Image-MTEdit(https://huggingface.co/papers?q=Qwen-Image-MTEdit)在所评测的开源模型中取得了最佳性能,证明了 MTEdit(https://huggingface.co/papers?q=MTEdit)在提升模型多轮图像编辑(https://huggingface.co/papers?q=multi-turn%20image%20editing)能力方面的有效性。
在你的 agent 中获取此论文:
hf papers read 2610.23751
没有最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用此论文的模型 0
没有模型关联此论文。
在模型的 README.md 中引用 arxiv.org/abs/2610.23751,即可从此页面链接到该模型。
引用此论文的数据集 0
没有数据集关联此论文。
在数据集的 README.md 中引用 arxiv.org/abs/2610.23751,即可从此页面链接到该数据集。
引用此论文的 Spaces 0
没有 Space 关联此论文。
在 Space 的 README.md 中引用 arxiv.org/abs/2610.23751,即可从此页面链接到该 Space。
包含此论文的收藏 0
没有收藏包含此论文。
将此论文添加到收藏,即可从此页面链接到它。
相似文章
ACEdit:通过非对称条件化实现稳定的多轮图像编辑
ACEdit 提出一种结合自强制(Self-Forcing)训练、教师蒸馏与非对称条件化的方案,使多轮图像编辑在累积分布偏移下保持稳定,显著降低长序列编辑中的质量退化。
多轮图像编辑的在线自蒸馏
本文提出MT-OPSD,一个非策略自蒸馏框架,以解决多轮图像编辑中的退化问题,并引入LME-Bench用于评估长期鲁棒性。
MT Forcing:借助自回归扩散实现稳定一致的多轮图像编辑
论文提出 MT Forcing,通过单轮分布匹配蒸馏与教师强制引导,提升基于自回归扩散的统一多模态模型在多轮图像编辑中的视觉质量稳定性与跨轮内容一致性。
从计划到像素:学习规划和编排实现开放式图像编辑
一个针对长序列图像编辑的体验式框架,将规划与奖励驱动的执行相结合,以提高复杂多步编辑的连贯性和可靠性。
文本-视觉协同指导的图像编辑
一种名为TV-Edit的新框架,结合文本指令和视觉提示实现精确图像编辑,并附带基准TV-Edit-Bench用于评估。该方法在空间控制和语义忠实度上优于现有方法。