FLAT: 面向几何精确场景生成的前馈潜在三角形溅射
摘要
FLAT提出了一种方法,直接从视频扩散潜在表示中解码显式三角形溅射,用于几何精确的3D场景生成。它引入了以射线为中心的旋转参数化和乘积窗口函数来改善梯度流,实现了比先前前馈方法更好的几何精度,同时支持实时渲染。
查看缓存全文
缓存时间: 2026/06/24 09:47
论文页面 - FLAT:面向几何精确场景生成的前馈潜在三角面片溅射
来源:https://huggingface.co/papers/2606.24876
摘要
视频扩散模型被改造为直接从潜在空间解码显式表面基元,从而能够生成具有更高几何精度和实时渲染能力的高质量3D场景。
从单张图像生成可探索的3D场景需要强大的生成先验以及适合下游应用的精确几何表示。当前的视频扩散模型提供高质量生成,并在潜在空间中隐式编码多视角几何结构。然而,现有的前馈潜在场景解码器通常输出缺乏明确定义表面的体积3D高斯,限制了其在仿真或标准图形管线中的应用。这促使我们解码不仅可渲染,而且更接近显式几何资产的表面对齐基元。我们探究是否可以将压缩的视频扩散潜在表示直接映射为单次前馈中的显式表面基元。为此,我们提出FLAT,首次展示了三角面片溅射可以直接从视频扩散潜在表示中解码。与解码3D高斯相比,预测平面基元因其对基元方向的高度敏感性而更具挑战性,常常导致梯度流不良。FLAT通过两个关键要素解决了这一问题:一种用于三角面片回归的以射线为中心旋转参数化方法,以及一种新颖的乘积窗函数,用于改善可微三角面片渲染中的梯度流。在标准基准测试上,FLAT在保持与最先进前馈基线相当视觉质量的同时,实现了显著更好的几何精度。我们进一步展示了轻量级的测试时精化步骤可以将预测的三角面片汤转换为完全不透明、可直接用于游戏引擎的表示,支持实时渲染。通过在相同的训练设置下评估3DGS、2DGS和三角面片溅射变体,我们首次对前馈场景生成中的表示权衡进行了系统分析。项目页面见 https://flat-splat.github.io
查看 arXiv 页面 (https://arxiv.org/abs/2606.24876)查看 PDF (https://arxiv.org/pdf/2606.24876)项目页面 (https://flat-splat.github.io/)添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2606.24876)
在你的Agent中获取这篇论文:
hf papers read 2606.24876
没有最新CLI?curl -LsSf https://hf.co/cli/install.sh | bash
引用该论文的模型0
没有模型链接此论文
请在模型的 README.md 中引用 arxiv.org/abs/2606.24876 以链接至此页面。
引用该论文的数据集0
没有数据集链接此论文
请在数据集的 README.md 中引用 arxiv.org/abs/2606.24876 以链接至此页面。
引用该论文的Spaces0
没有Space链接此论文
请在Space的 README.md 中引用 arxiv.org/abs/2606.24876 以链接至此页面。
包含该论文的收藏集0
没有收藏集包含此论文
请将此论文添加到收藏集中以链接至此页面。
相似文章
从视频扩散潜变量生成三角片元(5分钟阅读)
FLAT 是一种方法,能够直接从压缩的视频扩散潜变量中,通过单次前向传递解码出显式的三角片元,从而提升几何精度,同时支持快速光栅化和基于物理的交互。
TriSplat:面向仿真的前馈式三维场景重建
TriSplat是一种前馈式三维重建网络,利用有向三角形图元直接从单张图像生成可直接用于仿真的网格,省去了昂贵的后处理步骤。该方法在保持竞争性的新视角渲染质量的同时,实现了几何保真的重建。
ATSplat: 紧凑的前馈式3D高斯溅射与自适应Token扩展
ATSplat 提出了一种前馈式3D高斯溅射框架,利用自适应3D Token根据场景复杂度分配图元,在实现最先进渲染质量的同时,将高斯体数量相比密集方法减少了5.7倍以上。
GlobalSplat: 通过全局场景标记实现高效的前馈式三维高斯散射
GlobalSplat 引入了一种高效的前馈框架,用于三维高斯散射,通过全局场景标记实现紧凑且一致的场景重建,将计算开销和推理时间降低至78毫秒以下。该方法采用从粗到细的训练策略,防止表示膨胀,同时以显著更少的高斯原语(16K)达到有竞争力的新视角合成性能,与密集基线相比更为高效。
CompactSplat:用于前馈场景重建的空间自适应高斯分布
CompactSplat 是一种前馈框架,通过纹理引导的空间划分和分层采样来自适应地分配三维高斯,在稀疏视角场景重建中提升几何与纹理的恢复效果,同时支持无需重新训练的动态稀疏度控制。