Paint-Anything: 用于图像生成与编辑的统一全色控制

Hugging Face Daily Papers 论文

摘要

Paint-Anything介绍了一种统一的十六进制提示接口,用于图像生成与编辑的颜色控制。该接口在自定义数据集上训练,并通过新基准测试评估,表明在色彩保真度方面有显著提升。

专业设计需要全色控制:能够通过任何24位十六进制值指定对象的目标颜色,用于图像生成和编辑。先前的工作探索了颜色生成、编辑和着色,但通常依赖于专用的颜色表示或专门的推理过程。大型语言模型的进步提供了一个更简单的起点:即使是紧凑模型也能将十六进制值与颜色语义关联起来。我们提出了Paint-Anything,它通过对象级颜色监督学习一个共享的十六进制提示接口,用于生成和编辑。我们开发了一个数据管道,通过对象定位、感知颜色标签和编辑对合成,从真实图像构建Paint-500K。由于阴影使得真实图像的标签仅为近似颜色,我们使用纯色锚点来补充这种监督,其像素精确匹配其配对的十六进制值。这些锚点仅在高噪声时间步使用,将低噪声训练留给自然图像。我们进一步引入了Any Color Benchmark (ACBench),包括ACBench-T2I和ACBench-Edit,以测量两个任务中对象级十六进制颜色保真度。在FLUX.2-4B上,Paint-Anything将ACBench-T2I和ACBench-Edit分数分别提高了85.3%和28.3%,相对于基础模型,消融研究支持了训练方案。它还在比较方法中取得了最高的平均CompColor分数。
查看原文
查看缓存全文

缓存时间: 2026/09/21 07:21

论文页面 - Paint-Anything:面向图像生成与编辑的统一任意色彩控制

来源:https://huggingface.co/papers/2609.20816 发布于 9月17日

·

由 https://huggingface.co/sanaka87 提交

Ji Xie (https://huggingface.co/sanaka87) 于 9月21日

摘要

专业设计需要任意色彩控制能力:在图像生成与编辑中,能够通过任意 24 位十六进制值指定目标物体的颜色。以往工作探讨过颜色生成、编辑和着色,但通常依赖专用的颜色表示或专门的推理流程。大型语言模型的进展提供了一个更简单的起点:即使是紧凑的模型也能将十六进制值与颜色语义关联起来。我们提出了 Paint-Anything,该方法通过物体级颜色监督,学习了一个用于生成和编辑的共享十六进制提示接口。我们开发了一个数据管道,通过物体定位、感知色彩标注和编辑对合成,从真实图像构建了 Paint-500K 数据集。由于阴影使得真实图像的标注只能提供近似颜色,我们用纯色锚点来补充这种监督,这些锚点的像素值与它们配对的十六进制值精确匹配。这些锚点仅在高噪声时间步使用,低噪声训练则留给自然图像。我们进一步引入了任意色彩基准测试,包括 ACBench-T2I 和 ACBench-Edit,以衡量两项任务中的物体级十六进制颜色保真度。在 FLUX.2-4B 上,相对于基础模型,Paint-Anything 将 ACBench-T2I 和 ACBench-Edit 的得分分别提升了 85.3% 和 28.3%,消融实验证实了训练方案的有效性。在比较的方法中,它还取得了最高的平均 CompColor 分数。

查看 arXiv 页面 (https://arxiv.org/abs/2609.20816)查看 PDF (https://arxiv.org/pdf/2609.20816)添加至收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2609.20816)

引用此论文的模型 0

没有模型链接此论文

在模型的 README.md 中引用 arxiv.org/abs/2609.20816 以从此页面链接它。

引用此论文的数据集 0

没有数据集链接此论文

在数据集的 README.md 中引用 arxiv.org/abs/2609.20816 以从此页面链接它。

引用此论文的 Space 0

没有 Space 链接此论文

在 Space 的 README.md 中引用 arxiv.org/abs/2609.20816 以从此页面链接它。

包含此论文的收藏集 0

没有收藏集包含此论文

将此论文添加到收藏集 (https://huggingface.co/new-collection) 以从此页面链接它。

相似文章

PaintBench: 精确视觉编辑的确定性评估

Hugging Face Daily Papers

PaintBench是一个新的基准,用于评估多模态模型中的精确视觉编辑,涵盖4个类别中的20种操作,采用确定性像素级评估。测试11个模型显示整体性能较低,最佳模型仅获得17.1%的mIoU。

Mojave Paint

Product Hunt

Mojave Paint 是一款用于在 Mac 平台上直接操作静态图像的工具。

prunaai/p-image-edit

Replicate Explore

Pruna的p-image-edit是一款运行在Replicate平台上的高端AI模型,能够在一秒内快速完成业界领先的图像编辑,兼具速度、经济性和高视觉质量,精准遵循提示词并具备强大的文字渲染能力。