可交互世界的精确编辑与灵活引用
摘要
EditWorld 是一种视频世界模型,用于在可交互世界中实现精确编辑和灵活引用,在WBench-Editing基准测试中取得了73.8的最佳总分。
查看缓存全文
缓存时间: 2026/09/29 08:18
论文页面 - 可交互世界的精确编辑与灵活引用
来源:https://huggingface.co/papers/2609.34470
摘要
我们提出EditWorld,一个用于可交互世界精确编辑与灵活引用的视频世界模型。现有视频世界模型主要集中于导航功能,允许用户探索生成的世界,但对如何修改现有世界内容提供的控制能力有限。EditWorld通过在自回归生成过程中流式传输编辑指令和参考图像,将世界建模从探索扩展到精确修改。为支持这些能力,EditWorld引入了门控因果注意力机制来处理随时间变化的编辑条件和参考图像,同时采用稀疏上下文机制以维持有限的历史上下文进行长程推理。我们进一步采用了结合自回归与双向训练的策略,配合退火自重采样,并构建了专门的数据合成与标注流程,为世界编辑提供监督信号。我们还提出了WBench-Editing基准,用于系统性评估流式世界编辑能力。EditWorld在WBench-Editing上取得最佳整体表现,总分73.8,编辑得分80.0,在编辑相关指标上显著优于现有方法。https://github.com/leoisufa/EditWorld
查看arXiv页面 (https://arxiv.org/abs/2609.34470) 查看PDF (https://arxiv.org/pdf/2609.34470) GitHub4 (https://github.com/leoisufa/EditWorld) 添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2609.34470)
获取论文到您的智能体中:
hf papers read 2609.34470
没有最新CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用此论文的模型 0
无模型链接此论文
在模型的README.md中引用 arxiv.org/abs/2609.34470 以从此页面链接。
引用此论文的数据集 0
无数据集链接此论文
在数据集的README.md中引用 arxiv.org/abs/2609.34470 以从此页面链接。
引用此论文的Spaces 0
无Space链接此论文
在Space的README.md中引用 arxiv.org/abs/2609.34470 以从此页面链接。
包含此论文的收藏 0
无收藏包含此论文
将此论文添加到收藏 (https://huggingface.co/new-collection) 以从此页面链接。
相似文章
World Editing:在更深层级上干预可执行世界
该论文将世界编辑形式化为在不同深度上对可执行世界进行干预,并提出 IGMWorld,同时引入 IGMBench(涵盖 Minecraft 与 Terraria,共 110 个任务、1100 多项可执行评测标准)。研究发现,前沿编码智能体最多可解决 78.2% 的任务,但随着干预深度增加,可靠性下降,视觉一致性仍然较弱。
WBench:面向交互式视频世界模型评估的综合多轮基准
WBench是一个全面的多轮基准,用于评估交互式世界模型在五个维度上的表现,包含289个测试用例和1,058次交互轮次,提供自动子指标和诊断洞察。它揭示了没有单一模型能在所有维度上都表现优异。
WorldCraft:从相机导航到交互式视频世界模型中的物体操控
WorldCraft扩展了交互式视频世界模型,通过专门的控制流水线,在保持相机导航能力的同时实现物体级别的轨迹控制。
情境中的世界:基于上下文条件化的交互式视频世界建模
World-in-Context 提出了一种交互式视频世界建模框架,通过上下文条件化(In-Context Conditioning),将视角、动作和相机控制作为显式 token 统一纳入共享的自注意力空间,并引入 Interaction-Transport RoPE 以保持时间连续性。其 5B 模型在 WBench 上的导航性能与 22B 的 EchoWM 相当,同时实现了 93.8% 的视角切换成功率,而现有 5B 基线模型的成功率仅为 18.8%。
ReWorld:一个具有长期记忆的交互式世界模型
ReWorld 提出了一个交互式世界模型,该模型使用混合注意力窗口和分布匹配的LoRA蒸馏,将短期控制与长期记忆解耦,实现了具有高动作保真度和回忆能力的实时视频生成。