通过像素空间分组图像生成实现场景文本高效修正
摘要
PixText 将局部文本修正建模为像素空间的分组图像生成,仅生成目标区域并保留未编辑内容,借助 MeanFlow 实现四步快速生成,在新提出的 TextRefinementBench 上以 83.06% 的字形通过率大幅超越最强基线。
查看缓存全文
缓存时间: 2026/10/15 07:04
论文页面 - 通过像素空间分组图像生成实现场景文本高效精修
来源:https://huggingface.co/papers/2610.18284
摘要
生成图像通常具有连贯的布局和视觉内容,但小字号文本和复杂字形中的局部错误仍然限制了其可读性和实用性。场景文本精修要求准确性、内容保持性和高效性。现有的基于变分自编码器(VAE)的方法在重建过程中可能会丢失精细笔画,而整图编辑则可能改变背景颜色。在本工作中,我们提出了 PixText,一个将局部文本精修表述为像素空间分组图像生成的模型。以原始图像为条件,PixText 仅生成目标区域,保留未编辑的内容,并使用 MeanFlow 实现四步生成。我们进一步提出了 TextRefinementBench,用于评估生成图像中的文本修正效果和图像保持效果。在该基准上,PixText 取得了 83.06% 的字形通过率和 94.66% 的目标字符精确 OCR 准确率,而最强基线仅为 36.77% 和 52.31%。其四步 MeanFlow 变体在保持 81.84% 通过率的同时,每张图像的摊销生成成本不到一 GPU 秒。
查看 arXiv 页面 (https://arxiv.org/abs/2610.18284) 查看 PDF (https://arxiv.org/pdf/2610.18284) 加入收藏夹 (https://huggingface.co/login?next=%2Fpapers%2F2610.18284)
在您的 agent 中获取本文:
hf papers read 2610.18284
没有最新版 CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用本文的模型 0
暂无模型与本文关联
在模型的 README.md 中引用 arxiv.org/abs/2610.18284,即可在此页面建立关联。
引用本文的数据集 0
暂无数据集与本文关联
在数据集的 README.md 中引用 arxiv.org/abs/2610.18284,即可在此页面建立关联。
引用本文的 Space 0
暂无 Space 与本文关联
在 Space 的 README.md 中引用 arxiv.org/abs/2610.18284,即可在此页面建立关联。
包含本文的收藏夹 0
暂无收藏夹收录本文
将本文加入收藏夹 (https://huggingface.co/new-collection),即可在此页面建立关联。
相似文章
先分解部首,再奖励:面向精确中文文本渲染的细粒度监督
提出了基于表意文字描述序列(IDS)的IDSpect方法,通过细粒度的部件级与空间关系奖励信号改进中文文本渲染,使用GRPO对Qwen-Image进行后训练后,在LongText和GenTextEval上取得领先表现。
FocusVTC:基于自适应分辨率的高效高性能视觉文本压缩
FocusVTC 通过自适应分辨率打破了视觉文本压缩中的压缩率-性能权衡,借助 REL-SFT 和 GRPO 训练模型在低 DPI 全局视图的基础上选择性增强关键区域,在 RULER、LongBench、MRCR 等长上下文基准上大幅超越 Glyph 等基线,并实现 2.79 倍的在线端到端加速。
像素文本表征学习的设计基础
Pixel Linguist II 通过可变分辨率训练、自然图像-文本对齐、布局感知渲染和多语言课程,改进了视觉文本表征学习,取得了最先进的成果和鲁棒的压缩性能。
UltraText Bench:一个用于评估图像生成中视觉文字渲染的全面双语基准
UltraText Bench 是一个双语(英文/中文)基准,包含 24 个场景类别、432 条提示词,用于评估图像生成模型中密集视觉文字的渲染能力。该基准由 Q-Judge 视觉语言模型从文字保真度、清晰度、空间质量和场景质量四个维度进行评分,并揭示了 Z-Image-Turbo 与 Z-Image-Base 等不同模型变体之间明显的权衡关系。
SCOPE:面向文本到图像生成中提示工程的语义边界信用优化
SCOPE 提出一种基于 GRPO 的语义边界信用优化目标,通过在语义 span 内聚合策略对数概率变化来改进文本到图像生成的提示重写,在 GeneVal 和 T2I-CompBench 上相比原始 GRPO 分别提升 9.48% 和 7.62%。