重新审视局部上下文在长时间序列流式三维重建中的应用
摘要
ABot-Recon 通过使用固定的局部上下文,实现了从连续视频流中实时重建大规模环境的三维结构,达到了高效率和低内存使用。
查看缓存全文
缓存时间: 2026/09/01 12:41
论文页面 - 重新审视长时序流式三维重建中的局部上下文
来源:https://huggingface.co/papers/2608.27529
ABot-Recon 能够将单段连续视频实时转换为全局一致的三维重建。无论是持手机绕建筑行走、用行车记录仪穿行城市街道,还是操控无人机掠过校园,该系统仅依赖固定的12帧局部上下文,通过组合当前帧几何信息与相邻帧的相对位姿关系(无需依赖持续学习的长程记忆),即可完成长视频流的重建处理。在仅占用6.71 GB显存的情况下,该系统能够以24.45帧/秒的速度处理超过10,000帧的序列,实现大规模环境的高效实时三维重建。
预览图(https://cdn-uploads.huggingface.co/production/uploads/6433bc32a4c9c55871a42812/Ox12Ux8aOcghXL9_tCdFg.png)
相似文章
@hongseyanqiu: ABot-Recon 是一个来自 Amap CV Lab 的开源实时流式3D重建模型。它仅依赖于 KV c…
ABot-Recon 是一个来自 Amap CV Lab 的开源实时流式3D重建模型,使用 KV 缓存上下文和逐帧估计来生成可更新的3D点云地图,在 H100 GPU 上达到 24.45 FPS,并可部署在 AX650N NPU 等边缘设备上。
用于流式 3D 重建的几何上下文 Transformer
介绍了 LingBot-Map,这是一种前馈式 3D 基础模型,采用几何上下文 Transformer 架构用于流式 3D 重建,能够在 20 FPS 的速率下实现稳定的实时性能。
@ModelScope2022: AMAP CV Lab 推出 ABot-Recon,可将长视频流实时转换为相机路径和3D点云。 https…
AMAP CV Lab 推出了 ABot-Recon,这是一个实时AI系统,可处理长视频流以生成3D点云和相机路径,具有稳定的性能,并在Apache 2.0许可下发布了开源代码。
AnyRecon:基于视频扩散模型的任意视角 3D 重建
AnyRecon 提出了一种可扩展框架,利用具备持久场景记忆与几何感知条件的视频扩散模型,从任意稀疏输入进行 3D 重建。
robbyant/lingbot-map
LingBot-Map 是一个前馈式 3D 基础模型,用于流式 3D 重建,采用几何上下文转换器架构,在超过 10,000 帧的长序列上实现最先进的性能,并具有高效的 ~20 FPS 推理速度。