通过像素空间分组图像生成实现场景文本高效修正

Hugging Face Daily Papers 论文

摘要

PixText 将局部文本修正建模为像素空间的分组图像生成,仅生成目标区域并保留未编辑内容,借助 MeanFlow 实现四步快速生成,在新提出的 TextRefinementBench 上以 83.06% 的字形通过率大幅超越最强基线。

生成的图像通常具有连贯的布局和视觉内容,但小文字和复杂字符中的局部错误仍然限制了其可读性和实用性。场景文本修正需要兼顾准确性、内容保留和效率。现有的基于变分自编码器(VAE)的方法在重建过程中可能丢失精细笔画,而全图编辑则可能改变背景颜色。在本工作中,我们提出了 PixText,该模型将局部文本修正构建为像素空间的分组图像生成。在原始图像的条件下,PixText 仅生成目标区域,保留未编辑的内容,并使用 MeanFlow 实现四步快速生成。我们进一步提出了 Text Refinement Bench,用于评估生成图像中的文本修正效果和图像保留质量。在该基准测试上,PixText 达到了 83.06% 的字形通过率和 94.66% 的目标字符精确 OCR 准确率,而最强基线分别仅为 36.77% 和 52.31%。其四步 MeanFlow 变体在保持 81.84% 通过率的同时,每张图像的摊销生成成本不到一个 GPU 秒。
查看原文
查看缓存全文

缓存时间: 2026/10/15 07:04

论文页面 - 通过像素空间分组图像生成实现场景文本高效精修

来源:https://huggingface.co/papers/2610.18284

摘要

生成图像通常具有连贯的布局和视觉内容,但小字号文本和复杂字形中的局部错误仍然限制了其可读性和实用性。场景文本精修要求准确性、内容保持性和高效性。现有的基于变分自编码器(VAE)的方法在重建过程中可能会丢失精细笔画,而整图编辑则可能改变背景颜色。在本工作中,我们提出了 PixText,一个将局部文本精修表述为像素空间分组图像生成的模型。以原始图像为条件,PixText 仅生成目标区域,保留未编辑的内容,并使用 MeanFlow 实现四步生成。我们进一步提出了 TextRefinementBench,用于评估生成图像中的文本修正效果和图像保持效果。在该基准上,PixText 取得了 83.06% 的字形通过率和 94.66% 的目标字符精确 OCR 准确率,而最强基线仅为 36.77% 和 52.31%。其四步 MeanFlow 变体在保持 81.84% 通过率的同时,每张图像的摊销生成成本不到一 GPU 秒。

查看 arXiv 页面 (https://arxiv.org/abs/2610.18284) 查看 PDF (https://arxiv.org/pdf/2610.18284) 加入收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2610.18284)

在您的 agent 中获取本文:

hf papers read 2610.18284

没有最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash

引用本文的模型 0

暂无模型与本文关联

在模型的 README.md 中引用 arxiv.org/abs/2610.18284,即可在此页面建立关联。

引用本文的数据集 0

暂无数据集与本文关联

在数据集的 README.md 中引用 arxiv.org/abs/2610.18284,即可在此页面建立关联。

引用本文的 Space 0

暂无 Space 与本文关联

在 Space 的 README.md 中引用 arxiv.org/abs/2610.18284,即可在此页面建立关联。

包含本文的收藏夹 0

暂无收藏夹收录本文

将本文加入收藏夹 (https://huggingface.co/new-collection),即可在此页面建立关联。

相似文章

FocusVTC:基于自适应分辨率的高效高性能视觉文本压缩

Hugging Face Daily Papers

FocusVTC 通过自适应分辨率打破了视觉文本压缩中的压缩率-性能权衡,借助 REL-SFT 和 GRPO 训练模型在低 DPI 全局视图的基础上选择性增强关键区域,在 RULER、LongBench、MRCR 等长上下文基准上大幅超越 Glyph 等基线,并实现 2.79 倍的在线端到端加速。

像素文本表征学习的设计基础

Hugging Face Daily Papers

Pixel Linguist II 通过可变分辨率训练、自然图像-文本对齐、布局感知渲染和多语言课程,改进了视觉文本表征学习,取得了最先进的成果和鲁棒的压缩性能。

UltraText Bench:一个用于评估图像生成中视觉文字渲染的全面双语基准

Hugging Face Daily Papers

UltraText Bench 是一个双语(英文/中文)基准,包含 24 个场景类别、432 条提示词,用于评估图像生成模型中密集视觉文字的渲染能力。该基准由 Q-Judge 视觉语言模型从文字保真度、清晰度、空间质量和场景质量四个维度进行评分,并揭示了 Z-Image-Turbo 与 Z-Image-Base 等不同模型变体之间明显的权衡关系。