SolveEdit: 在生成模型中评估视觉问题解决的基准测试

Hugging Face Daily Papers 论文

摘要

本文介绍了SolveEdit,一个通过场景变换评估生成模型视觉问题解决能力的基准测试,并提出了SolveEdit-PLAN以提升性能。

机器智能通常通过抽象推理问题进行评估,然而许多现实世界的问题是视觉化的,例如物体排列、布局修复或路线追踪。解决这些问题需要理解场景、推断为实现目标必须进行的改变,并在不干扰无关内容的情况下实现该改变。然而,现有的基准测试主要评估感知、生成或明确指定的变换,导致目标驱动的视觉问题解决探索不足。为填补这一空白,我们引入SolveEpIT,一个通过场景变换进行视觉问题解决的基准测试。给定一张图像和一个目标,模型必须从请求、场景或视觉表达的规则中推断出有效的变换,然后在执行变换时保留无关内容。SoLvEEDrr包含2,728个案例。原子转换合同指定了必需的保护条件,使得SoLvEScoRE能够在没有单一参考输出的情况下衡量完成情况和意外变化。最强的评估模型仅达到57.0%的SolvEScore。我们进一步引入SolveEdiT-PLAN,一个两阶段的视觉规划器,在生成前实例化转换。在匹配的单次生成评估下,它在三个测试生成器上平均将SoLvEScoRE提升了9.1个百分点,其中GPT-Image-2从57.0%提升到71.6%,且无需修改编辑器。
查看原文
查看缓存全文

缓存时间: 2026/09/29 08:18

论文页面 - SolveEdit:生成模型视觉问题解决能力基准测试

来源:https://huggingface.co/papers/2609.35504 作者: , , , , , , , , , , ,

摘要

机器智能常通过抽象推理问题进行评估,但许多现实问题是视觉化的,如物体摆放、布局修复或路径规划。解决这类问题需要理解场景、推断为实现目标必须进行的改变,并在不干扰无关内容的情况下实现这些改变。然而现有基准测试主要评估感知、生成或明确指定的转换,对目标驱动的视觉问题解决关注不足。为弥合这一差距,我们推出SolveEdit——一个基于场景转换的视觉问题解决基准测试。给定图像与目标,模型需从请求、场景或视觉化规则中推断有效转换,在保留无关内容的同时执行该操作。SolveEdit包含2,728个案例,通过原子转换合约指定必要条件和保护条件,使SolveScore能无需单一参考输出即可衡量任务完成度与意外改变。当前最强模型仅达57.0% SolveScore。我们进一步提出SolveEdit-PLAN,一种在生成前实例化转换的两阶段视觉规划器。在匹配的单次生成评估中,该方法在三个测试生成器上平均提升SolveScore 9.1个百分点,其中GPT-Image-2从57.0%提升至71.6%,且无需修改编辑器本身。

查看arXiv页面(https://arxiv.org/abs/2609.35504)查看PDF(https://arxiv.org/pdf/2609.35504)项目页面(https://wenjieshu.github.io/SolveEdit-project-page/)GitHub3(https://github.com/WenjieShu/SolveEdit)添加到收藏(https://huggingface.co/login?next=%2Fpapers%2F2609.35504)

通过智能体获取本论文: hf papers read 2609.35504

尚未安装最新CLI?curl -LsSf https://hf.co/cli/install.sh | bash

引用本论文的模型0

无模型链接本论文

在模型README.md中引用arxiv.org/abs/2609.35504以从本页面关联模型。

引用本论文的数据集0

无数据集链接本论文

在数据集README.md中引用arxiv.org/abs/2609.35504以从本页面关联数据集。

引用本论文的Space 0

无Space链接本论文

在Space README.md中引用arxiv.org/abs/2609.35504以从本页面关联Space。

包含本论文的收藏0

无收藏包含本论文

将本论文添加到收藏(https://huggingface.co/new-collection)以从本页面建立关联。

相似文章

从生成视角探索空间智能

Hugging Face Daily Papers

研究者推出首个量化多模态模型生成式空间智能的基准 GSI-Bench,通过在图像生成过程中评估 3D 空间约束遵守情况来衡量能力。在合成数据集上微调可显著提升空间编辑保真度与下游空间理解,证明生成式训练能增强空间推理。

4DCodeBench:面向动态场景逆图形学的智能体基准测试

Hugging Face Daily Papers

4DCodeBench 提出了一个通过代码生成实现 4D 逆图形学的基准测试,其中智能体需要将视频中的动态场景重建为可执行的图形程序。前沿模型在静态重建方面表现强劲,但在可靠捕获形变、流体流动、断裂等复杂动态方面仍面临挑战。