InfiniSplat:面向大基线单目视图合成的隐式高斯解码

Hugging Face Daily Papers 论文

摘要

InfiniSplat 提出了一种前馈式单图像 3D 高斯泼溅框架,利用几何引导采样和查询条件隐式解码来实现表面对齐的高斯表示,从而改善大基线单目视图合成,并从合成室内训练泛化到开放世界场景。

单图像前馈 3D 高斯泼溅(3DGS)旨在从单张输入图像直接生成可渲染的 3D 场景表示,避免多视图采集和逐场景优化的成本。然而,现有方法通常受到像素对齐表示的限制,即从固定的图像网格位置预测高斯属性。这种像素对齐的基元可以产生有前景的近视图渲染,但它们与底层场景表面的耦合较弱,并且在大视点偏移下难以保持连贯结构。我们提出了 InfiniSplat,一种从像素对齐表示转向表面对齐表示的前馈式单图像 3DGS 框架。InfiniSplat 首先使用几何引导采样,根据深度诱导的局部表面结构放置 2D 支撑点,然后应用查询条件隐式解码器,从这些支撑点处查询到的图像特征来预测高斯属性,从而构建这种表示。通过将支撑点位置植根于几何,同时将高斯预测与固定像素中心解耦,InfiniSplat 生成的高斯布局能更好地贴合场景表面,并减少由网格离散化引起的散射基元。在多个跨数据集 NVS 评估中,与单图像前馈基线相比,InfiniSplat 取得了最先进的性能,并展示了从 Hypersim 合成室内训练到复杂开放世界场景的零样本泛化能力。项目页面:https://zju3dv.github.io/InfiniSplat。
查看原文
查看缓存全文

缓存时间: 2026/08/05 01:42

论文页面 - InfiniSplat: Implicit Gaussian Decoding for Large-Baseline Monocular View Synthesis

来源: https://huggingface.co/papers/2608.02437

摘要

单图像前馈3D高斯泼溅(3DGS)旨在从单张输入图像直接生成可渲染的3D场景表示,避免多视角采集和逐场景优化的成本。然而,现有方法通常受限于像素对齐表示,其中高斯原语是从固定图像网格位置预测的。这种像素对齐原语可以产生不错的近视角渲染,但它们与底层场景表面的耦合较弱,并且在大视角变化下难以保持连贯的结构。我们提出了 InfiniSplat,一个前馈式单图像 3DGS 框架,它将像素对齐表示转向表面对齐表示。InfiniSplat 通过首先使用几何引导采样,根据深度信息得到的局部表面结构放置 2D 支撑点,然后应用查询条件隐式解码器,从这些支撑点处查询的图像特征中预测高斯属性,从而构建这种表示。通过将支撑点位置锚定在几何上,同时将高斯预测与固定像素中心解耦,InfiniSplat 生成了更好地贴合场景表面的高斯布局,并减少了由网格离散化造成的分散原语。在多个跨数据集的 NVS 评估中,与单图像前馈基线相比,InfiniSplat 取得了最先进的性能,并展示了从 Hypersim 室内合成训练到复杂开放世界场景的零样本泛化能力。项目页面:https://zju3dv.github.io/InfiniSplat/。

查看 arXiv 页面 (https://arxiv.org/abs/2608.02437) 查看 PDF (https://arxiv.org/pdf/2608.02437) 项目页面 (https://zju3dv.github.io/InfiniSplat/) GitHub105 (https://github.com/zju3dv/InfiniSplat) 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2608.02437)

在您的 agent 中获取此论文:

hf papers read 2608\.02437

还没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型 1

PLUS-WAVE/InfiniSplat Image-to-3D • 约 1 小时前更新 • 6 (https://huggingface.co/PLUS-WAVE/InfiniSplat)

引用此论文的数据集 0

没有数据集链接到此论文。

在数据集的 README.md 中引用 arxiv.org/abs/2608.02437,即可从本页面链接到它。

引用此论文的 Spaces 2

包含此论文的收藏 0

没有包含此论文的收藏。

将此论文添加到收藏(https://huggingface

相似文章

GlobalSplat: 通过全局场景标记实现高效的前馈式三维高斯散射

Hugging Face Daily Papers

GlobalSplat 引入了一种高效的前馈框架,用于三维高斯散射,通过全局场景标记实现紧凑且一致的场景重建,将计算开销和推理时间降低至78毫秒以下。该方法采用从粗到细的训练策略,防止表示膨胀,同时以显著更少的高斯原语(16K)达到有竞争力的新视角合成性能,与密集基线相比更为高效。

CompactSplat:用于前馈场景重建的空间自适应高斯分布

Hugging Face Daily Papers

CompactSplat 是一种前馈框架,通过纹理引导的空间划分和分层采样来自适应地分配三维高斯,在稀疏视角场景重建中提升几何与纹理的恢复效果,同时支持无需重新训练的动态稀疏度控制。

SplatWeaver:学习分配高斯基元以实现可泛化新视角合成

Hugging Face Daily Papers

SplatWeaver 是一种前馈新视角合成框架,它根据空间复杂度动态分配 3D 高斯基元,相比固定分配方法提升了渲染质量与效率。该框架利用基数高斯专家和高频先验引导的像素级路由方案,自适应地在复杂与平滑的场景区域间分配基元。