WildCity: 一个真实世界城市规模的渲染、仿真与空间智能测试平台
摘要
WildCity 引入了由自动驾驶车队收集的大规模多模态数据集,用于城市规模的导航与空间表征。该数据集包含 18 条长轨迹,并建立了重建与闭环仿真的基线,以推动能够感知和推理城市规模环境的 AI 系统发展。
查看缓存全文
缓存时间: 2026/07/09 07:51
论文页面 - WildCity:一个用于渲染、仿真和空间智能的真实世界城市规模测试平台
来源:https://huggingface.co/papers/2607.06838 作者:
,
,
,
,
,
,
,
,
,
,
摘要
WildCity 提供了一个大规模多模态数据集,用于城市导航与空间表征,旨在推动能够像人类认知能力一样感知和推理城市规模环境的 AI 系统的研究。
人类可以在陌生城市中导航,并逐渐形成跨越数十平方公里的连贯空间心理地图。AI 能否构建同等规模的空间表征?尽管近期的基础模型在场景重建和具身智能方面取得了进展,但扩展到整个城市仍然是一个开放的挑战,主要原因在于缺乏城市规模的数据。为了填补这一空白,我们推出了 WildCity,这是一个由自主车队在复杂城市环境中采集的真实世界多模态数据集。我们的数据集包含 18 条轨迹,平均每条长度为 83.7 公里,并保留了野外感知的核心挑战,例如动态物体、光照变化以及不完美的相机位姿。我们进一步建立了一个面向城市的重建基线,并将重建的环境转化为闭环仿真器。除了数据集和基线之外,我们还系统分析了迈向仿真就绪城市数字孪生的关键挑战:可扩展性、外推能力和不确定性。最终,WildCity 旨在推动不仅是城市规模渲染的进展,更广泛地推动能够像人类认知一样在空间尺度上进行感知、记忆和推理的 AI 的探索。项目页面:https://han-xiangyu.github.io/Wild-City/
查看 arXiv 页面 (https://arxiv.org/abs/2607.06838)查看 PDF (https://arxiv.org/pdf/2607.06838)项目页面 (https://han-xiangyu.github.io/Wild-City/)GitHub2 (https://github.com/han-xiangyu/Wild-City)添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2607.06838)
在你的 agent 中获取此论文:
hf papers read 2607.06838
没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用此论文的模型0
没有与此论文关联的模型
在模型 README.md 中引用 arxiv.org/abs/2607.06838 以从此页面链接。
引用此论文的数据集1
Neptune615/Wild-City 预览• 约2小时前更新 • 24 • 1 (https://huggingface.co/datasets/Neptune615/Wild-City)
引用此论文的 Spaces0
没有与此论文关联的 Space
在 Space README.md 中引用 arxiv.org/abs/2607.06838 以从此页面链接。
包含此论文的收藏1
相似文章
360CityArena:面向具身智能体的逼真虚拟城市导航基准
360CityArena 是一个基于东京秋叶原地区360度视频构建的照片级逼真城市导航基准。它评估具身智能体的环境理解、路径推理和空间推理能力,结果表明,即使是像 Gemini 2.5 Flash 这样强大的基于LMM的智能体,其表现也远低于人类水平。
UrbanGround:从局部感知到空间能动性在真实城市中的研究
UrbanGround评估了多模态语言模型代理是否能在逼真的3D城市复制品中保持可靠的导航和空间推理能力,发现局部感知技能无法组合成扩展的目标导向行为。
CityRAG:基于空间锚定的视频生成,步入真实城市
CityRAG 提出一种视频生成模型,利用地理注册数据生成长时、物理一致、3D 连贯的真实城市视频,为机器人与自动驾驶提供可导航、可仿真的逼真环境。
CityBehavEx: 一个可扩展且经实证验证的LLM辅助城市仿真平台
CityBehavEx是一个可扩展的LLM辅助城市仿真平台,它结合了成熟的人类移动模型与微调后的交叉编码器,为城市规模的人口生成真实且经实证验证的移动模式。在单个消费级GPU上,不到一小时即可模拟100,000个智能体在75天内的行为。
SpatialWorld: 多模态智能体在真实世界任务中的交互式空间推理基准测试
SpatialWorld是一个统一的基准测试,用于评估多模态智能体在各种真实世界任务中的交互式空间推理能力。结果表明,即使是最强大的模型,其任务成功率也很低。