EmbodiedMemory-Bench:面向长时程具身任务的具身记忆基准测试

Hugging Face Daily Papers 论文

摘要

本文介绍了EmbodiedMemory-Bench,一个用于评估长时程具身任务中记忆的基准测试,并提出了Embodied-Memorizer,一个具有8B策略模型的外部记忆系统,以增强代理性能。

长时程具身交互要求代理在观察、行动和遇到变化时保留并持续更新关于环境的信息。然而,当前代理难以可靠地维持此类记忆。我们的分析将这一限制归因于四个关键缺陷:弱细粒度视觉记忆、不可靠的动态世界状态追踪、未能记录交互结果揭示的世界状态以及从先验经验中泛化能力有限。然而,现有基准测试未在长时程具身交互期间直接评估这些记忆能力。为解决这一差距,我们引入了EmbodiedMemory-Bench(EMem-Bench),包含2,554个交互式片段,涵盖四个任务族。EMem-Bench要求代理从交互历史中构建和更新记忆,然后利用它通过在环境中行动来完成后续任务。我们进一步提出Embodied-Memorizer(EMem),一个将具身经验组织为空间记忆、事件记忆和场景记忆的外部记忆系统。我们还训练了EMem-8B,一个管理并使用这些记忆的8B策略模型。我们评估了多样化范围的开源和专有多模态大语言模型以及代表性多模态记忆系统。结果表明,当前模型在四个挑战上仍然薄弱且不均衡。在匹配的骨干模型下,EMem在评估的记忆系统中实现了最佳整体性能,并改进了开源和专有模型,而EMem-8B在其基础上进一步改进。项目页面:https://zju-omniai.github.io/EmbodiedMemoryBench/
查看原文
查看缓存全文

缓存时间: 2026/09/29 04:13

论文页面 - EmbodiedMemory-Bench:长时程具身任务的具身记忆基准测试

来源:https://huggingface.co/papers/2609.28236

摘要

长时程的具身交互要求智能体在观察、行动和应对环境变化的过程中,能够持续保存并不断更新环境信息。然而,目前的智能体难以可靠地维持此类记忆。我们的分析将此局限追溯至四个关键缺陷:薄弱的细粒度视觉记忆、不可靠的动态世界状态追踪、未能记录交互结果揭示的世界状态,以及从先验经验中泛化的能力有限。然而,现有基准并未直接评估长时程具身交互过程中的这些记忆能力。为填补这一空白,我们推出了EmbodiedMemory-Bench(EMem-Bench),包含四个任务族中的2,554个交互片段。EMem-Bench要求智能体从交互历史中构建和更新记忆,并利用这些记忆在环境中执行操作以完成后续任务。我们进一步介绍了Embodied-Memorizer(EMem),这是一个将具身经验组织为空间记忆、事件记忆和场景记忆的外部记忆系统。我们还训练了EMem-8B,一个管理并运用这些记忆的8B参数策略模型。我们评估了一系列开源和闭源多模态大语言模型以及代表性的多模态记忆系统。结果表明,当前模型在四个挑战上仍然表现薄弱且不均衡。在匹配的骨干网络下,EMem在所有评估的记忆系统中取得了最佳整体性能,并提升了开源和闭源模型的表现,而EMem-8B则在其骨干网络基础上进一步提升。项目页面:https://zju-omniai.github.io/EmbodiedMemoryBench/

查看arXiv页面 (https://arxiv.org/abs/2609.28236)查看PDF (https://arxiv.org/pdf/2609.28236)项目页面 (https://zju-omniai.github.io/Embodied-Omni/EmbodiedMemoryBench/)添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2609.28236)

将此论文加入您的智能体:

hf papers read 2609\.28236

没有最新版CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型 0

无模型关联此论文

在模型的README.md中引用 arxiv.org/abs/2609.28236 以从本页面关联。

引用此论文的数据集 1

lzLiang/EmbodiedMemoryBench 查看器• 4天前更新 • 2.55k • 324 • 2 (https://huggingface.co/datasets/lzLiang/EmbodiedMemoryBench)

引用此论文的Space 0

无Space关联此论文

在Space的README.md中引用 arxiv.org/abs/2609.28236 以从本页面关联。

包含此论文的收藏 0

无收藏包含此论文

将此论文添加到收藏 (https://huggingface.co/new-collection) 以从本页面关联。

相似文章

ABot-AgentOS: 一种具有终身多模态记忆的通用机器人智能体操作系统

Hugging Face Daily Papers

本文介绍了ABot-AgentOS,一种具有终身多模态记忆的通用机器人智能体操作系统,并提出了用于评估长周期具身任务的EmbodiedWorldBench。实验表明,该系统在任务成功率和记忆基准测试中取得了显著改进,表明专用的智能体操作系统层能够增强执行能力和持久记忆。