SCOPE:针对FPS世界模型在可玩环境中模拟跨游戏操作
摘要
SCOPE提出了一种方法,通过在视频扩散模型的Transformer块中引入条件模块,将作用域内效果与作用域外视觉效果分离,无需分割标签,实现FPS游戏中的精确动作响应,并推出了CrossFPS,这是一个多游戏数据集,支持零样本跨游戏迁移。
查看缓存全文
缓存时间: 2026/05/25 06:36
论文页面 - SCOPE:在可玩环境中模拟跨游戏操作以构建FPS世界模型
来源:https://huggingface.co/papers/2605.23345 作者:
,
,
,
,
,
,
,
,
,
,
,
,
摘要
SCOPE通过将视频扩散模型中的Transformer块调节为分离作用域内与作用域外视觉效果(无需分割标签),实现了FPS游戏中的精确动作响应。
第一人称射击(FPS)游戏的交互式世界模型必须在每一帧解析高频重叠的控制信号,同时不破坏未受影响的区域。现有方法全局注入动作并在单一游戏上训练,在密集FPS输入下表现不佳。我们观察到FPS动作具有空间选择性:射击或换弹等离散事件仅影响武器周围的局部区域(作用域),而连续的相机和移动信号则控制稳定的周围环境。我们提出SCOPE,它在预训练视频扩散模型的每个Transformer块中插入一个调节模块。该模块将特征重塑为逐像素时间序列,使得每个位置根据局部视觉内容计算其动作响应。这实现了无需分割标签的作用域内效果与作用域外生成的分离。我们还引入了CrossFPS,这是首个多游戏FPS数据集,包含帧对齐的动作遥测数据。它包含来自7款游戏的69K个片段,配有10自由度控制器信号,经筛选去除了游戏内偏差。模型学习通用的视觉到动作映射,而非特定于游戏模式,从而实现对未见场景的零样本迁移。实验证实了强大的动作响应能力、精确的作用域分离以及有效的跨游戏泛化。
查看arXiv页面 (https://arxiv.org/abs/2605.23345)查看PDF (https://arxiv.org/pdf/2605.23345)项目页面 (https://z2tong.github.io/SCOPE/)GitHub7 (https://github.com/z2tong/SCOPE)添加到收藏 (https://huggingface.co/login?next=%2Fpapers%2F2605.23345)
在你的智能体中获取此论文:
hf papers read 2605\.23345
没有最新的CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash
引用本论文的模型1
zizhaotong/SCOPE 图像到视频• 8B• 更新于约5小时前 • 73 • 6 (https://huggingface.co/zizhaotong/SCOPE)
引用本论文的数据集2
zizhaotong/CrossFPS-train 更新于约2小时前 • 150 • 3 (https://huggingface.co/datasets/zizhaotong/CrossFPS-train)
zizhaotong/CrossFPS-val 更新于约2小时前 • 89 • 3 (https://huggingface.co/datasets/zizhaotong/CrossFPS-val)
引用本论文的Space0
没有Space链接此论文
请在一个Space的README.md中引用arxiv.org/abs/2605.23345,以从此页面链接到它。
包含本论文的收藏集1
相似文章
EgoCS-400K:一个面向世界模型的第一人称游戏数据集
EgoCS-400K 是一个大规模的第一人称反恐精英数据集,包含超过40万段第一人称视频和10,000小时的游戏玩法,为世界模型研究提供了时间对齐的视频-动作-语言轨迹。
SCOPE:面向复杂图像生成的结构化分解与条件技能编排
SCOPE 是一个基于规范引导的文生图框架,通过追踪语义承诺以更好地满足复杂的视觉意图。该框架引入了 Gen-Arena 基准测试,并在复杂的生成任务中展现了强大的性能。
从像素到状态:重新思考作为游戏引擎的交互式世界模型
本文通过考察四个关键维度——动作控制、状态动态、状态-观测持久性和实时生成——重新思考了交互式世界模型作为游戏引擎的角色,并介绍了为《黑神话:悟空》构建的可扩展数据引擎,包含超过90小时的游戏数据,以推进状态感知的游戏世界建模。
SCOPE:通过共同进化策略进行开放式任务的自我对弈
SCOPE是一个用于开放式任务的自我对弈框架,它共同进化挑战者(Challenger)和求解器(Solver)策略,在没有外部监督的情况下,在基准测试上取得了高达+10.4分的提升。
DreamForge-World 0.1 预览版:低算力实时可控世界模型
DreamForge-World 0.1 预览版是一个低算力世界模型,可在消费级GPU上实现实时交互模拟,支持键盘/鼠标控制,在单个RTX 4090上以480p分辨率达到14-15 FPS。