AsySplat: 用于长序列场景建模的高效非对称3D高斯泼溅

Hugging Face Daily Papers 论文

摘要

AsySplat提出了一种非对称架构,将3D高斯泼溅中的几何和外观建模解耦,实现了长序列场景建模的高效率,相比基于优化的方法加速近800倍。

近期可泛化的3D高斯泼溅模型推动了长序列新视角合成(NVS)的发展,但代价是大量的冗余计算。我们发现这种冗余可以通过两个观察来缓解:(i) 高质量的NVS并不严格要求高精度的几何;(ii) 外观学习通常比几何恢复更容易。基于这些见解,我们提出了一种非对称架构,将几何和外观建模解耦。几何分支以大部分参数处理粗粒度标记,用于多视角重建;而外观分支以显著更少的参数操作细粒度标记,以捕捉细节。两个分支通过双边连接交互,实现对各自任务的相互指导。这种任务感知的非对称性减少了计算冗余,更合理地分配计算资源,从而提高了参数效率,使更小的模型也能实现强劲性能。在32视角960P输入上,我们的模型匹配了基于优化的方法,同时实现了近800倍的加速,并以更少的参数和更低的训练/推理开销超越了最先进可泛化模型的零样本性能,实现了整体效率提升。
查看原文
查看缓存全文

缓存时间: 2026/07/20 09:41

论文页面 - AsySplat: 高效非对称3D高斯泼溅用于长序列场景建模

来源:https://huggingface.co/papers/2607.10995

摘要

近期可泛化的3D高斯泼溅模型推动了长序列新视角合成(NVS)的发展,但代价是大量冗余计算。我们发现这种冗余可以通过两个观察来缓解:(i)高质量NVS并不严格要求高精度几何;(ii)外观学习通常比几何恢复更容易。受这些见解启发,我们提出一种非对称架构,将几何与外观建模解耦。几何分支处理粗粒度令牌,利用大部分参数进行多视角重建;而外观分支处理细粒度令牌,使用显著更少的参数捕捉细节。两个分支通过双向连接交互,为各自任务提供相互指导。这种任务感知的非对称性减少了计算冗余,更明智地分配计算资源,从而提升参数效率,使更小的模型也能实现强劲性能。在32视角960P输入上,我们的模型与基于优化的方法相匹配,同时实现近800倍加速,并以显著更少的参数和更少的训练/推理开销超越了最先进可泛化模型的零样本性能,实现了整体效率提升。

查看arXiv页面(https://arxiv.org/abs/2607.10995)查看PDF(https://arxiv.org/pdf/2607.10995)项目页面(https://zhongyingji.github.io/asysplat/)GitHub7(https://github.com/zhongyingji/asysplat)添加到收藏(https://huggingface.co/login?next=%2Fpapers%2F2607.10995)

引用本论文的模型0

没有模型链接本论文

请在模型README.md中引用arxiv.org/abs/2607.10995以从本页面链接。

引用本论文的数据集0

没有数据集链接本论文

请在数据集README.md中引用arxiv.org/abs/2607.10995以从本页面链接。

引用本论文的Spaces0

没有Space链接本论文

请在Space README.md中引用arxiv.org/abs/2607.10995以从本页面链接。

包含本论文的收藏集0

没有收藏集包含本论文

请将本论文添加到收藏集(https://huggingface.co/new-collection)以从本页面链接。

相似文章

GlobalSplat: 通过全局场景标记实现高效的前馈式三维高斯散射

Hugging Face Daily Papers

GlobalSplat 引入了一种高效的前馈框架,用于三维高斯散射,通过全局场景标记实现紧凑且一致的场景重建,将计算开销和推理时间降低至78毫秒以下。该方法采用从粗到细的训练策略,防止表示膨胀,同时以显著更少的高斯原语(16K)达到有竞争力的新视角合成性能,与密集基线相比更为高效。

ZipSplat:更少的高斯,更优的 Splats

Hugging Face Daily Papers

ZipSplat 是一种基于 token 的前馈 3D 高斯溅射模型,利用 k-means 聚类将高斯放置与像素网格解耦,在无需真实位姿或内参的情况下,在 DL3DV 和 RealEstate10K 上实现了约 6 倍的高斯减少,同时设立了新的最佳结果。

在Julia中实现更好的高斯溅射

Hacker News Top

GaussianSplatting.jl 2.0版本通过KernelAbstractions.jl带来了多GPU后端支持、多线程UI、MCMC致密化策略,以及用于更好3D重建的深度/几何监督。