SUPRA-TEX:具有超对齐纹理的3D生成
摘要
SUPRA-Tex 提出通过解耦可见材质估计、表面对齐与观测引导的3D补全来生成可重光照的3D材质,在单图3D生成中实现可见区域的高保真还原与未观测表面的连贯补全,在纹理化和端到端资产生成任务上达到最先进水平。
查看缓存全文
缓存时间: 2026/10/16 11:03
论文页面 - SUPRA-TEX:具有超高对齐度纹理的 3D 生成
来源:https://huggingface.co/papers/2610.22352
摘要
SUPRA-Tex 将可见材质估计、表面对齐和 3D 补全解耦,以生成可重新打光的 3D 材质,保留参考图像细节并补全未观测表面\。
单图像 3D 生成 (https://huggingface.co/papers?q=Single%20image%203D%20generation)旨在为给定的 3D 网格赋予可重新打光的材质,同时忠实保留参考图像的视觉细节\。现有方法要么在融合不一致的多视图预测时引入伪影,要么难以通过隐式图像特征条件化保留精细细节\。为解决这些挑战,我们提出了 SUPRA-Tex,其核心原则是将可见材质估计、表面对齐和观测引导的 3D 补全解耦\。这种分工使得在有限 3D 数据上训练的 3D 生成器能够将其能力集中于保留可见信息并补全未观测表面\。具体而言,我们首先训练一个基于 MLLM 的图像编辑 (https://huggingface.co/papers?q=MLLM-based%20image%20editing)模型,以预测参考视角下剥离光照后的 PBR 贴图 (https://huggingface.co/papers?q=PBR%20maps)\。随后,我们将这些贴图投影到可见表面,并使用预训练的材质 VAE 编码器 (https://huggingface.co/papers?q=material%20VAE%20encoder)将其编码为原生观测潜变量 (https://huggingface.co/papers?q=observation%20latents),使其与生成目标共享潜在空间\。交错式流 Transformer (https://huggingface.co/papers?q=interleaved%20flow%20transformer)将这些潜变量作为固定的只读锚点,同时交替执行未观测区域更新与全表面更新,以生成完整的材质潜变量\。这一设计实现了与参考图像的超高对齐度,在可见区域达到所见即所得的保真度,并对未观测表面进行连贯补全\。SUPRA-Tex 仅使用公开数据集训练,在几何条件纹理生成 (https://huggingface.co/papers?q=geometry-conditioned%20texturing)和端到端资产生成两项任务中均取得了最先进的性能,在真实场景图像上的表现达到甚至超越领先的商业系统\。项目页面:https://supra-3d.github.io/supratex/
查看 arXiv 页面 (https://arxiv.org/abs/2610.22352)查看 PDF (https://arxiv.org/pdf/2610.22352)项目页面 (https://supra-3d.github.io/supratex/)GitHub28 (https://github.com/Supra-3D/SUPRA-Tex)添加到收藏集 (https://huggingface.co/login?next=%2Fpapers%2F2610.22352)
引用此论文的模型0
没有关联此论文的模型
在模型的 README.md 中引用 arxiv.org/abs/2610.22352,即可从此页面链接到该模型\。
引用此论文的数据集0
没有关联此论文的数据集
在数据集的 README.md 中引用 arxiv.org/abs/2610.22352,即可从此页面链接到该数据集\。
引用此论文的 Space0
没有关联此论文的 Space
在 Space 的 README.md 中引用 arxiv.org/abs/2610.22352,即可从此页面链接到该 Space\。
收录此论文的收藏集0
没有收录此论文的收藏集
将此论文添加到收藏集 (https://huggingface.co/new-collection),即可从此页面链接到该收藏集\。
相似文章
T3lescope:基于图像的任意分辨率高保真生成式表面重建
T3lescope提出一种单一固定分辨率生成器的推理时粗到细级联方法,从多视角图像实现跨尺度(从单物体到大型户外场景)的任意分辨率高保真3D场景网格重建,无需逐场景优化,在室内、户外和城市规模场景上超越了前馈与生成基线。
UltraTex: 释放2K多视角扩散在3D纹理生成中的潜力
UltraTex是一个高效框架,用于基于高分辨率多视角扩散的3D纹理生成,引入了技术以减少冗余并在训练和推理中实现显著加速。
用于可扩展且多用途3D生成的结构化3D潜在表示
微软提出统一的结构化潜在表示(SLAT),结合校正流 Transformer 实现高质量、多格式(辐射场、3D 高斯、网格)的 3D 资产生成,支持文本/图像条件及局部编辑,在 50 万个 3D 样本的数据集上训练的 20 亿参数模型显著超越现有方法。
WorldRecon:面向大规模三维世界的生成式多视图网格重建
WorldRecon 提出一种生成式多视角网格重建框架,可从无位姿 RGB 图像重建大规模 3D 场景的完整网格。它将 TRELLIS.2 生成模型与重建式条件架构结合,通过邻域感知潜在修补和因果世界生成保证场景级一致性,在合成与真实室内场景上分别将 Chamfer 距离降低 14.9% 和 43.1%,达到最先进性能。
UniForge3D:在共享锚点引导空间中联合进行三维重建与生成
UniForge3D 提出在共享的锚点引导空间中联合建模 3D 重建与生成,解决相机相对重建与规范空间生成之间的坐标不匹配问题,并在 Toys4K 和 GSO 数据集上取得了最先进的外观与几何结果。