memory-evaluation

标签

Cards List
#memory-evaluation

执行先于记忆:诊断视频世界模型中的记忆失效

Hugging Face Daily Papers ↗ · 2026-10-16 缓存

论文提出 MIST 评测方法,将场景搭建与变化执行分离,以诊断视频世界模型中的记忆失效问题;并提出 M3-Agent,通过递归修正指令将 MIST 揭示得分提升三倍,同时显著提高 WRBench 和 MBench-T 的成绩。

0 人收藏 0 人点赞
#memory-evaluation

WorldMemBench:视频世界模型记忆能力的综合基准

Hugging Face Daily Papers ↗ · 2026-10-13 缓存

WorldMemBench 提出了一个用于系统评估视频世界模型世界记忆能力的基准,涵盖260个测试用例,分别考察静态记忆(人物、物体、环境的身份与几何保持)和动态记忆(事件演进与状态持续性)。对九个代表性模型的评估显示,强静态记忆并不意味着可靠的状态演化,且重复重访会暴露记忆退化问题。

0 人收藏 0 人点赞
#memory-evaluation

记忆之外:从记住到了解你——基于长期多模态个人档案的视角

arXiv cs.CL ↗ · 2026-09-18 缓存

本文介绍了ReaLMem,这是首个使用真实个人档案评估AI长期多模态记忆的基准,并提出了ChronoProfiler,通过时间加权来提升AI伴侣的个性化能力。

0 人收藏 0 人点赞
#memory-evaluation

BudgetBench:用于本地大型语言模型代理内存策略评估的预算分层协议与试点工具

arXiv cs.LG ↗ · 2026-09-15 缓存

本文提出BudgetBench,一个通过调整每次调用的输入令牌预算来评估本地大型语言模型代理内存策略的协议与工具,为社区基准测试提供可重用的测量平台。

0 人收藏 0 人点赞
#memory-evaluation

良好记忆需有ECC:超越准确率评估视觉-语言模型的记忆能力

arXiv cs.LG ↗ · 2026-09-02 缓存

本文提出了ECCBench,一个用于评估视觉-语言模型记忆能力的基准和评估框架,超越准确率指标,聚焦于效率、压缩与校准三个维度。

0 人收藏 0 人点赞
#memory-evaluation

MemUse: 将记忆评估从直接问答转向长期人机对话中的自然整合

Hugging Face Daily Papers ↗ · 2026-08-25 缓存

本文介绍了MemUse,一个基准,它表明对话记忆的直接问答准确性不能预测用户满意度,而先前上下文的自然整合则可以,揭示了回忆与对话使用之间的巨大差距。

0 人收藏 0 人点赞
#memory-evaluation

@_akhaliq: LongMINT 在长时域代理系统中评估多目标干扰下的记忆

X AI KOLs Following ↗ · 2026-05-21 缓存

LongMINT 是一个基准测试,用于在长时域代理系统中评估多目标干扰下的记忆性能。

0 人收藏 0 人点赞
#memory-evaluation

MEME:多实体与动态记忆评估

Hugging Face Daily Papers ↗ · 2026-05-12 缓存

MEME 基准测试在多实体和动态变化的条件下评估 AI 记忆系统,揭示了即便采用先进的检索技术,在依赖关系推理方面依然存在显著挑战。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈