NoPA: 非参数化在线三维场景图生成

Hugging Face Daily Papers 论文

摘要

NoPA 提出了一种基于非参数分布的实时三维场景图生成方法,通过核密度估计和基于粒子的对象表示保留了几何细节,显著优于现有方法。

经典的三维场景图生成方法由于环境映射的计算成本高以及需要生成中间点云表示,无法实现实时运行。为了缓解这一问题,近期的一项工作避开了点云,转而使用每个对象的轻量级高斯分布。这种近似大幅加速了推理,并实现了实时三维场景图生成。然而,该表示存在两个关键缺点:1)每个对象被近似为单个三维高斯分布,导致三维几何细节严重丢失;2)这种近似与真实对象几何之间的差异加剧了在线推理中对象候选的合并不准确。为了解决这些问题,我们提出了 NoPA,它将每个对象表示为独立的非参数分布。这种表示保留了三维几何信息,同时保持了参数化高斯分布的实时推理能力。基于我们新颖的对象表示,我们提出了一种定制化的合并策略,以恢复连贯的对象实例。具体而言,我们利用核密度估计上的最大均值差异,实现在在线探索过程中对对象候选的鲁棒合并,同时最小化增加的计算复杂度。关键是为每个对象维护一个固定的粒子集。此外,为了纠正由错误分类对象导致的关系损失,NoPA 在高亲和力的对象之间传播关系。实验表明,NoPA 在不牺牲实时推理速度的情况下显著优于现有方法。
查看原文
查看缓存全文

缓存时间: 2026/07/02 07:47

论文页面 - NoPA:非参数在线3D场景图生成

来源:https://huggingface.co/papers/2607.00529

摘要

NoPA 提出了一种基于非参数分布的实时3D场景图生成方法,通过核密度估计和基于粒子的物体表示,在保持计算效率的同时保留了几何细节。

经典的3D场景图生成 (https://huggingface.co/papers?q=3D%20scene%20graph%20generation)方法因环境映射计算代价高昂且需要生成中间点云表示,无法实现实时运行。为缓解此问题,近期有工作放弃点云,转而采用轻量级高斯分布 (https://huggingface.co/papers?q=Gaussian%20distribution)对每个物体进行近似。这种近似大幅加速了推理,并实现了实时3D场景图生成 (https://huggingface.co/papers?q=3D%20scene%20graph%20generation)。然而,该表示存在两个关键缺陷:1) 每个物体被近似为单个3D高斯,导致3D几何细节严重丢失;2) 该近似与真实物体几何之间的差异加剧了在线推理中物体候选合并的不准确性。为解决这些问题,我们提出 NoPA,将每个物体表示为独立的非参数分布 (https://huggingface.co/papers?q=non-parametric%20distribution)。这种形式在保留3D几何信息的同时,保持了参数化高斯形式的实时推理 (https://huggingface.co/papers?q=real-time%20inference)能力。基于我们新颖的物体表示,我们提出了一种定制的合并策略来恢复连贯的物体实例。具体而言,我们利用核密度估计 (https://huggingface.co/papers?q=kernel%20density%20estimates)上的最大均值差异 (https://huggingface.co/papers?q=maximum%20mean%20discrepancy) 实现在线探索过程中物体候选的鲁棒合并,同时最小化额外计算复杂度。关键在于为每个物体维护一个固定的粒子集 (https://huggingface.co/papers?q=particle%20set)。此外,为了纠正因错误分类物体导致的关系损失,NoPA 传播高亲和力物体之间的关系。实验表明,NoPA 在不牺牲实时推理 (https://huggingface.co/papers?q=real-time%20inference)速度的情况下,显著优于当前方法。

查看 arXiv 页面 (https://arxiv.org/abs/2607.00529)查看 PDF (https://arxiv.org/pdf/2607.00529)添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2607.00529)

在你的 Agent 中获取此论文:

hf papers read 2607\.00529

没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型0

无模型关联此论文

在模型 README.md 中引用 arxiv.org/abs/2607.00529 即可从此页面链接。

引用此论文的数据集0

无数据集关联此论文

在数据集 README.md 中引用 arxiv.org/abs/2607.00529 即可从此页面链接。

引用此论文的 Spaces0

无 Space 关联此论文

在 Space README.md 中引用 arxiv.org/abs/2607.00529 即可从此页面链接。

包含此论文的收藏0

无收藏包含此论文

将论文添加到收藏 (https://huggingface.co/new-collection)以从此页面链接。

相似文章

Sat3DGen:基于单张卫星图像的全面街景级3D场景生成

Hugging Face Daily Papers

Sat3DGen采用几何优先的方法,从单张卫星图像生成街景级3D场景,通过新颖的约束条件和训练策略,提高了几何精度和照片级真实感。该方法在VIGOR-OOD基准测试上相比先前工作有显著改进。

先见后码:面向空间感知的教育动画生成中的视觉先验学习

arXiv cs.AI

本文介绍了 OmniManim,一个基于渲染反馈感知的框架,利用大语言模型从自然语言描述生成教育动画。它通过引入显式的视觉规划、渲染后诊断和局部修复来解决元素重叠、对齐错误等视觉缺陷,并在新构建的数据集上展示了改进的渲染质量。

PixWorld:在像素空间中统一3D场景生成与重建

Hugging Face Daily Papers

PixWorld提出了一种统一的像素空间扩散方法,用于3D场景重建与生成,通过直接的图像级监督和几何感知特征对齐,克服了潜在空间方法的局限性。该方法优于先前的生成方法,并达到了与最先进的重建方法相当的性能。

SynCity 3000: 自举场景级3D扩散

Hugging Face Daily Papers

SynCity 3000 提出了一种框架,用于生成大规模、全局一致的3D场景,该框架通过将图像到3D生成器适配为卷积算子,并在来自新数据引擎的合成场景数据上进行微调来实现。