@svpino: 这个模型能够生成连贯的、跨越多个场景的长达1小时以上的视频,毫无卡顿。我读了他们的论文,所以…
摘要
这条推文介绍了LingBot-World-Infinity,一个开放权重的视频生成模型,它采用一种训练技术来从错误中恢复,从而能够生成跨越多个场景的连贯的1小时视频。
查看缓存全文
缓存时间: 2026/07/13 18:03
该模型能够生成连贯的超过一小时的视频,跨越多个场景,毫无卡顿。
我阅读了他们的论文,你就不用读了。工作原理如下:
首先,这是一个开放权重的模型。你可以在下方找到GitHub仓库和模型权重链接。
大多数视频模型一次生成一帧视频。它们查看之前的帧来决定接下来生成什么。
不幸的是,如果某一帧出现错误,后续每一帧都会放大这个错误。很快画面就会变得极其糟糕。
@robbyant_brain 的新世界模型 LingBot-World-Infinity 的工作原理不同。以下是主要亮点:
• 模型通过利用自身错误进行练习。由于训练时只向模型展示干净的视频片段,它学会了生成看起来完美的视频,但从未学会在出现错误时恢复。相反,该模型长时间运行在自己的输出上,使其漂移到实际使用中遇到的同样有缺陷的状态。
• 然后,模型被展示回归之路。从每个有缺陷的状态开始,一个更慢、更谨慎的模型版本演示了什么是干净的延续。快速模型调整其帧以匹配。它一遍又一遍地练习恢复,总是从自己的混乱开始。
• 结果是一个能够自我修正的模型。无论漂移到何处,它都知道回归之路,因为这正是它训练的内容。这就是它能够保持连贯一小时而不是一分钟后崩溃的原因。
除了140亿参数的主模型外,论文还描述了一个13亿参数的变体,旨在单个消费级GPU上运行。
见下方链接:
相似文章
@FinanceYF5: 1/ 大多数AI"世界模型"跑几分钟就会画面崩坏、场景漂移。 @robbyant_brain刚刚开源 LingBot-World 2.0 (Infinity):支持小时级实时生成,长时间运行画质不衰减,稳定输出720p/60fps。 这是…
LingBot-World 2.0 (Infinity) 刚刚开源,支持小时级实时生成,长时间运行画质不衰减,稳定输出720p/60fps,是机器人学会预判世界的关键一步。
视频生成模型作为世界模拟器
OpenAI的技术报告介绍了Sora视频生成模型,该模型通过视觉补丁统一多样化的视觉数据,支持大规模训练生成模型,能够生成长达一分钟的高清视频,支持可变的时长、宽高比和分辨率。
@heyshrutimishra: 新视频模型刚刚发布。但这款并非为电影级视频打造。LingBot-Video专为具身智能设计…
LingBot-Video是一个30B参数的视频模型,采用稀疏MoE架构,专为具身智能设计,现已开源。它在RBench上优于现有模型,训练数据来自7万+小时的具身数据。
robbyant/lingbot-world-v2-14b-causal-fast
LingBot-World 2.0 是一个先进的世界模型,实现了无限制的交互范围、实时720p/60fps视频流、多样化的交互元素,以及一个集成了飞行员和导演智能体的智能体框架。该模型已在Hugging Face上发布,附带有推理代码和技术报告。
LingBot-Video: 稀疏MoE视频扩散Transformer(总参数13B,激活参数1.4B)后训练为动作条件世界模型[R]
LingBot-Video是一个13B的稀疏MoE视频扩散Transformer(1.4B激活参数),通过强化学习后训练为动作条件世界模型,权重和代码已开源。它包含一个由VLM评分的物理合理性奖励,并将其自身定位为策略评估器和动作规划器,但缺少闭环机器人实验结果。