标签
Viggle发布JST-2模型,采用“物理原生”的Joint Space-and-Time架构,将世界表示为带空间位置与物理属性的3D原子,可在约1秒内以不到1美分的成本生成可交互探索的3D场景、带骨骼的角色及全身动作,支持API调用但暂未开源。
这篇文章讨论了一段由AI生成的视频,其中名人Jennifer Lawrence、Ana de Armas、Megan Fox和Jennifer Lopez在打排球,突出了AI视频技术的进步以及创建复杂多人物场景的挑战。
DSD是一种基于扩散的方法,用于在模拟人形控制中发现多样且可复用的运动技能,通过更广泛的行为覆盖改进了先前的技能发现技术。
Sorceress 3D Studio 提供了一站式AI流水线,将文本描述转换为游戏级3D动画,支持自动绑骨和多种动作生成,可直接导出到游戏引擎。
Wan-Animate-2 是一个全新的端到端角色动画框架,它在重新设计的 Diffusion Transformer 中直接输入驱动视频,实现高保真动作生成和身份保持。它还推出了一个轻量级变体,用于实时流式动画,并已发布开源权重。
Motion4Motion 是一个无需训练的运动迁移框架,它从视频中建模运动流而不是依赖骨架结构,从而在推理时实现跨物种(例如,从人类到动物)的运动迁移。
SCAIL-2 是一个用于端到端受控角色动画的开源模型,它使用驱动视频动画化参考角色,支持角色替换和多角色场景,无需中间姿态表示。
SCAIL-2是一个框架,通过直接从驱动视频迁移运动而无需中间表示,实现了端到端的受控角色动画。它使用了统一任务分解、合成数据(MotionPair-60K)以及新颖的条件化技术,如上下文内掩码条件化和偏差感知DPO。
StreamChar是一个用于实时生成角色动画音视频的流式框架,利用LLM编排器与联合音视频DiT,结合两阶段蒸馏和记忆机制,以维持长时域一致性和视觉质量。