极简视觉惯性里程计

Hugging Face Daily Papers 论文

摘要

一种极简视觉惯性里程计方法,使用四个带有光学Gabor掩模的光电二极管和一个时序卷积网络,实现对差动驱动机器人的精确平面运动估计,并在多种室内外地形上进行了验证,无需实际场景微调。

视觉惯性里程计(VIO)对于移动机器人导航至关重要,它通常使用具有大量像素的摄像头。捕捉和处理摄像头图像需要大量资源。本文提出了一种极简的平面里程计方法,证明仅需四个视觉测量值和一个IMU即可为差动驱动机器人提供鲁棒的运动估计。我们的关键洞察是,四个朝下的光电二极管通过光学Gabor掩模感知世界,产生的信号编码了速度信息。基于此,我们使用物理仿真器联合优化掩模参数和时序卷积网络(TCN)。得到的模型能够仅从光电二极管产生的四个测量值解码出速度。将这些速度估计与IMU的角速度相结合,即可得到连续的平面轨迹。我们通过安装在差动驱动机器人上的原型传感器验证了该方法。在多种室内外地形上,我们的系统紧密跟踪参考真值,无需任何实际场景微调。我们的工作表明,极简感测能够实现高效且精确的平面里程计。
查看原文
查看缓存全文

缓存时间: 2026/05/22 10:19

论文页面 - 极简视觉惯性里程计

来源:https://huggingface.co/papers/2605.19990

摘要

一种极简视觉惯性里程计方法,利用四个带光学Gabor掩膜的光电二极管和时序卷积网络,实现了差分驱动机器人的精确平面运动估计。

视觉惯性里程计(Visual-Inertial Odometry,VIO)对于移动机器人导航至关重要,它使用具有大量像素的相机。捕获和处理相机图像需要大量资源。本文提出了一种极简的平面里程计方法,证明仅需四个视觉测量值和一个IMU就能为差分驱动机器人(differential-drive robots)提供鲁棒的运动估计。我们的关键洞察是:四个向下面对的光电二极管(photodiodes)通过光学Gabor掩膜(optical Gabor masks)感知世界,产生的信号能够编码速度。基于此,我们联合优化掩膜参数与时序卷积网络(Temporal Convolutional Network,TCN),并使用基于物理的仿真器(physically-grounded simulator)进行训练。最终模型仅从光电二极管产生的四个测量值中解码速度。将这些速度估计与IMU的角速度结合,即可得到连续的平面轨迹。我们通过安装于差分驱动机器人上的原型传感器验证了该方法。在多种室内外地形中,我们的系统无需任何真实世界微调即可紧密跟踪参考真值。我们的工作表明,极简感知能够实现高效且精确的平面里程计。

查看arXiv页面(https://arxiv.org/abs/2605.19990)查看PDF(https://arxiv.org/pdf/2605.19990)项目页面(https://cave.cs.columbia.edu/projects/categories/project?cid=Computational%20Imaging&pid=Minimalist%20Visual%20Inertial%20Odometry)GitHub4(https://github.com/pastifra/four-pixel-vio)添加到收藏(https://huggingface.co/login?next=%2Fpapers%2F2605.19990)

在你的代理中获取这篇论文:

hf papers read 2605.19990

没有最新的CLI?curl -LsSf https://hf.co/cli/install.sh | bash

引用此论文的模型0

尚无模型链接此论文

请在模型 README.md 中引用 arxiv.org/abs/2605.19990 以从此页面链接。

引用此论文的数据集0

尚无数据集链接此论文

请在数据集 README.md 中引用 arxiv.org/abs/2605.19990 以从此页面链接。

引用此论文的Spaces0

尚无Space链接此论文

请在Space README.md 中引用 arxiv.org/abs/2605.19990 以从此页面链接。

包含此论文的收藏集0

尚无收藏集包含此论文

请将此论文添加到收藏集(https://huggingface.co/new-collection)以从此页面链接。

相似文章

PointDiT: 像素空间扩散用于单目几何估计

Hugging Face Daily Papers

PointDiT提出了一种极简的像素空间扩散变换器,使用纯ViT架构进行单目几何估计,在超越复杂基于潜空间模型的同时,在模糊区域保持简洁性和鲁棒性。

LIMMT:动作追踪中的少即是多

Hugging Face Daily Papers

本文介绍了LIMMT,这是一项以数据为中心的研究,表明使用高质量、极小的运动数据子集(不到AMASS的3%)进行训练,在基于物理的人形动作追踪方面优于使用完整数据集,并通过物理可行性、多样性和复杂性来定义运动数据质量。

Lift4D:协调单视角3D估计用于野外4D重建

Hacker News Top

Lift4D是一个测试时优化框架,能够从单目野外视频中重建动态物体的完整4D几何、外观和形变,在具有遮挡和非刚性运动的挑战性序列上优于先前方法。

Ultralytics YOLO26:统一的实时端到端视觉模型

Hugging Face Daily Papers

Ultralytics YOLO26 引入了一个统一的实时视觉模型家族,具有无需NMS的推理、改进的训练策略以及用于检测、分割和姿态估计的多任务能力,实现了最先进的精度与延迟权衡。