T3lescope:基于图像的任意分辨率高保真生成式表面重建

Hugging Face Daily Papers 论文

摘要

T3lescope提出一种单一固定分辨率生成器的推理时粗到细级联方法,从多视角图像实现跨尺度(从单物体到大型户外场景)的任意分辨率高保真3D场景网格重建,无需逐场景优化,在室内、户外和城市规模场景上超越了前馈与生成基线。

我们从具有已知相机位姿的多视角图像中重建高保真三维场景网格,无需针对每个场景进行优化,适用尺度涵盖从单个物体到大型室外场景。逐场景优化方法缺乏在观测稀疏或表面光亮、透明时所需的、通过学习获得的三维先验。现有生成方法利用此类先验补全观测稀疏区域的几何结构,但通常以固定分辨率处理有限的空间范围,需要在空间覆盖范围与细节之间进行权衡。因此,重建大型场景往往需要将其划分为相互重叠、独立处理的局部区域,这使得全局几何一致性难以维持。为解决这些问题,我们提出了 T3lescope,通过推理阶段由粗到细的级联,将单个固定分辨率生成器应用于不同场景尺度。粗层级确定场景布局,而更细的层级则在逐渐细化的空间单元内,对从较粗层级继承的几何结构进行扰动和去噪,以恢复表面细节。该模型在多个尺度的独立空间单元上进行训练,并在所有层级间共享权重,因此训练时不固定任何层级结构,层级数量、空间单元的尺度及位置均在推理时确定。在室内、室外和城市尺度的场景中,T3lescope 优于前馈式和生成式基线方法,达到或超过逐场景优化方法的表现,并能恢复精细结构以及光亮和透明表面。这些结果表明,我们的方法能够泛化至多样的场景、视角数量和图像分辨率。项目主页:https://pfnet-research.github.io/t3lescope/
查看原文
查看缓存全文

缓存时间: 2026/10/13 06:44

论文页面 - T3lescope:从图像进行任意分辨率的高保真生成式表面重建

来源:https://huggingface.co/papers/2610.03308

摘要

我们从带有相机位姿的多视角图像中重建高保真3D场景网格,无需针对每个场景进行优化,适用尺度涵盖单个物体到大型户外场景。针对每个场景进行优化的方法缺乏在观测稀疏或表面具有光泽或透明时所需的、通过学习获得的3D先验。现有生成式方法利用此类先验来补全观测稀疏区域的几何结构,但通常以固定分辨率在有限的空间范围内运行,在空间覆盖范围与细节之间进行权衡。因此,重建大型场景往往需要将其划分为独立处理且相互重叠的局部区域,这使得维持全局几何一致性变得困难。为解决这些问题,我们提出了T3lescope,它在推理时通过由粗到细的级联结构,将单个固定分辨率生成器应用于不同尺度的场景。粗层级确定场景布局,更细的层级则在逐步细化的空间单元内,对继承自较粗层级的几何结构进行扰动和去噪,以恢复表面细节。模型在多个尺度的独立单元上训练,并在所有层级之间共享权重,因此训练期间不固定任何层级结构,层级数量、单元尺度和单元位置均在推理时确定。在室内、户外和城市尺度的场景中,T3lescope优于前馈和生成式基线方法,达到或超过针对每个场景进行优化的方法,并能恢复精细结构以及光泽和透明表面。这些结果表明,我们的方法能够泛化到不同场景、视图数量和图像分辨率。项目页面:https://pfnet-research.github.io/t3lescope/

查看arXiv页面 (https://arxiv.org/abs/2610.03308)查看PDF (https://arxiv.org/pdf/2610.03308)项目页面 (https://pfnet-research.github.io/t3lescope/)GitHub2 (https://github.com/pfnet-research/t3lescope)添加到合集 (https://huggingface.co/login?next=%2Fpapers%2F2610.03308)

在你的智能体中获取这篇论文:

hf papers read 2610\.03308

没有最新的CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用这篇论文的模型0

没有模型关联这篇论文

在模型的README.md中引用arxiv.org/abs/2610.03308,即可从此页面链接到该模型。

引用这篇论文的数据集0

没有数据集关联这篇论文

在数据集的README.md中引用arxiv.org/abs/2610.03308,即可从此页面链接到该数据集。

引用这篇论文的Spaces0

没有Space关联这篇论文

在Space的README.md中引用arxiv.org/abs/2610.03308,即可从此页面链接到该Space。

包含这篇论文的合集0

没有合集包含这篇论文

将这篇论文添加到合集 (https://huggingface.co/new-collection),即可从此页面链接到该合集。

相似文章

WorldRecon:面向大规模三维世界的生成式多视图网格重建

Hugging Face Daily Papers

WorldRecon 提出一种生成式多视角网格重建框架,可从无位姿 RGB 图像重建大规模 3D 场景的完整网格。它将 TRELLIS.2 生成模型与重建式条件架构结合,通过邻域感知潜在修补和因果世界生成保证场景级一致性,在合成与真实室内场景上分别将 Chamfer 距离降低 14.9% 和 43.1%,达到最先进性能。

Sat3DGen:基于单张卫星图像的全面街景级3D场景生成

Hugging Face Daily Papers

Sat3DGen采用几何优先的方法,从单张卫星图像生成街景级3D场景,通过新颖的约束条件和训练策略,提高了几何精度和照片级真实感。该方法在VIGOR-OOD基准测试上相比先前工作有显著改进。

用于可扩展且多用途3D生成的结构化3D潜在表示

Papers with Code Trending

微软提出统一的结构化潜在表示(SLAT),结合校正流 Transformer 实现高质量、多格式(辐射场、3D 高斯、网格)的 3D 资产生成,支持文本/图像条件及局部编辑,在 50 万个 3D 样本的数据集上训练的 20 亿参数模型显著超越现有方法。

SUPRA-TEX:具有超对齐纹理的3D生成

Hugging Face Daily Papers

SUPRA-Tex 提出通过解耦可见材质估计、表面对齐与观测引导的3D补全来生成可重光照的3D材质,在单图3D生成中实现可见区域的高保真还原与未观测表面的连贯补全,在纹理化和端到端资产生成任务上达到最先进水平。