SolveEdit: 在生成模型中评估视觉问题解决的基准测试
摘要
本文介绍了SolveEdit,一个通过场景变换评估生成模型视觉问题解决能力的基准测试,并提出了SolveEdit-PLAN以提升性能。
查看缓存全文
缓存时间: 2026/09/29 08:18
论文页面 - SolveEdit:生成模型视觉问题解决能力基准测试
来源:https://huggingface.co/papers/2609.35504 作者: , , , , , , , , , , ,
摘要
机器智能常通过抽象推理问题进行评估,但许多现实问题是视觉化的,如物体摆放、布局修复或路径规划。解决这类问题需要理解场景、推断为实现目标必须进行的改变,并在不干扰无关内容的情况下实现这些改变。然而现有基准测试主要评估感知、生成或明确指定的转换,对目标驱动的视觉问题解决关注不足。为弥合这一差距,我们推出SolveEdit——一个基于场景转换的视觉问题解决基准测试。给定图像与目标,模型需从请求、场景或视觉化规则中推断有效转换,在保留无关内容的同时执行该操作。SolveEdit包含2,728个案例,通过原子转换合约指定必要条件和保护条件,使SolveScore能无需单一参考输出即可衡量任务完成度与意外改变。当前最强模型仅达57.0% SolveScore。我们进一步提出SolveEdit-PLAN,一种在生成前实例化转换的两阶段视觉规划器。在匹配的单次生成评估中,该方法在三个测试生成器上平均提升SolveScore 9.1个百分点,其中GPT-Image-2从57.0%提升至71.6%,且无需修改编辑器本身。
查看arXiv页面(https://arxiv.org/abs/2609.35504)查看PDF(https://arxiv.org/pdf/2609.35504)项目页面(https://wenjieshu.github.io/SolveEdit-project-page/)GitHub3(https://github.com/WenjieShu/SolveEdit)添加到收藏(https://huggingface.co/login?next=%2Fpapers%2F2609.35504)
通过智能体获取本论文:
hf papers read 2609.35504
尚未安装最新CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用本论文的模型0
无模型链接本论文
在模型README.md中引用arxiv.org/abs/2609.35504以从本页面关联模型。
引用本论文的数据集0
无数据集链接本论文
在数据集README.md中引用arxiv.org/abs/2609.35504以从本页面关联数据集。
引用本论文的Space 0
无Space链接本论文
在Space README.md中引用arxiv.org/abs/2609.35504以从本页面关联Space。
包含本论文的收藏0
无收藏包含本论文
将本论文添加到收藏(https://huggingface.co/new-collection)以从本页面建立关联。
相似文章
展示而非讲述:在生成像素而非LLM文本中评估空间认知
提出了ProVisE,一个与基准无关的框架,用于利用像素空间输出评估图像生成模型的空间认知,并引入了SpatialGen-Bench,用于跨14个空间子任务的统一评估。
VGI-BENCH: 探测视频生成模型中的视觉智能
VGI-BENCH 通过27项任务评估视频生成模型中的视觉推理,揭示当前系统在可靠性和自我纠正方面的局限性。
从生成视角探索空间智能
研究者推出首个量化多模态模型生成式空间智能的基准 GSI-Bench,通过在图像生成过程中评估 3D 空间约束遵守情况来衡量能力。在合成数据集上微调可显著提升空间编辑保真度与下游空间理解,证明生成式训练能增强空间推理。
VisEditBench:视觉语言模型能否根据多模态反馈编辑可视化代码?
介绍了VisEditBench,这是一个包含1,395个人工标注的可视化代码编辑任务的基准,面向视觉语言模型,涵盖反馈引导的修复和参考引导的重新样式化。评估了20个VLM,并提出了VisEditAgent,一个基于渲染的编辑框架,将通过率从55.75%提升到67.99%。
4DCodeBench:面向动态场景逆图形学的智能体基准测试
4DCodeBench 提出了一个通过代码生成实现 4D 逆图形学的基准测试,其中智能体需要将视频中的动态场景重建为可执行的图形程序。前沿模型在静态重建方面表现强劲,但在可靠捕获形变、流体流动、断裂等复杂动态方面仍面临挑战。