Wizard:通过智能体控制实时操纵任意世界
摘要
Wizard 提出一种游戏世界模型,通过解耦角色动画、场景操控与游戏逻辑,实现对未见过角色的关节级动作与实时交互控制,支持每秒 24 帧的交互,并对新场景、角色和动作具备零样本泛化能力。
查看缓存全文
缓存时间: 2026/11/02 03:26
论文页面 - Wizard:通过智能体控制实时操纵任意世界
来源:https://huggingface.co/papers/2610.40339 🪄 Wizard:通过智能体控制实时操纵任意世界!
现有的游戏世界模型能够生成逼真的视觉画面,但仍受限于熟悉的环境和预定义的动作\。控制主要集中于移动,对关节式动作的支持有限\。世界模型能否跟随一个从未见过的角色,呈现其挥剑、展翅或在战斗中变身的过程?
Wizard 将角色动画、场景操纵和游戏逻辑与视觉生成解耦\。智能体通过结构化视觉代理控制关节骨架和场景几何,而显式世界状态则支持自适应的首领行为和符合游戏机制的战斗\。
我们构建了 50.3 小时的对齐代理–视频数据对,涵盖 750 个场景和 178 个角色\。角色感知自适应掩码保留参考外观,而因果适配和少步蒸馏则实现了 24 FPS 的交互,并能零样本泛化至未见过的场景、角色和动作\。
从世界探索、角色召唤到变身和场景操纵,Wizard 赋予玩家更大的自由,让他们能够创建并控制自己的游戏世界\。
代码即将发布!
相似文章
无限世界与多样交互
本文介绍了LingBot-World 2.0,一个先进的世界建模系统,具有无界交互范围、实时720p 60fps视频生成、多样化的交互元素(例如攻击、施法),以及通过领航员和导演智能体实现的新型多智能体行为控制,还附带一个共享的多玩家界面。
WorldCraft:从相机导航到交互式视频世界模型中的物体操控
WorldCraft扩展了交互式视频世界模型,通过专门的控制流水线,在保持相机导航能力的同时实现物体级别的轨迹控制。
Zing-0.5: 面向实时联合动作与文本控制的可玩世界
本文介绍了Zing-0.5,一个50亿参数的自回归世界模型,用于生成可通过键盘和文本控制实时交互的可玩世界。它在导航任务中表现出高性能,并展示了以24 FPS进行低成本实时推理的能力。
基于 DAO 和 JING 的生成式世界模拟
提出生成式世界模拟框架,将持久共享世界状态引擎 DAO 与第一人称交互体验模型 JING 耦合,通过连续交互循环生成可随用户动作演化并保留历史的沉浸式视听体验。
WorldPlay2:扩展控制与长时程中的实时交互式世界模型
WorldPlay2 是一种交互式世界模型,集成了分解式混合控制接口、压缩记忆和稳定蒸馏,以在控制任务中实现实时响应性和长时一致性。