zai-org/SCAIL-2 · Hugging Face

来源：https://huggingface.co/zai-org/SCAIL-2

https://huggingface.co/zai-org/SCAIL-2#scail-2-unifying-controlled-character-animation-with-end-to-end-in-context-conditioningSCAIL-2：统一控制角色动画与端到端上下文条件化

SCAIL-2 是一个开源模型，用于端到端控制角色动画。它能够利用驱动视频对参考角色进行动画化，同时支持角色替换和多角色场景，而无需依赖中间姿态表示。

预告片

https://huggingface.co/zai-org/SCAIL-2#%F0%9F%94%8E-overview🔎 概述

以往的角色动画方法严重依赖中间表示，如骨架图或修复掩码。这些中间表示在复杂动作下存在歧义，限制了驱动源的种类（仅限人体动作），并且限制了替换和多角色动画的应用范围。

SCAIL-2 消除了这种依赖，实现了端到端驱动。通过使用多个现成模型（SCAIL-Preview、Wan-Animate、MoCha），合成了 60K 个运动对，并通过带有专用掩码通道和 RoPE 设计的统一动作迁移接口进行训练。结合统一化的反向驱动训练策略，使模型学会了超越其教师模型的能力，从而产生了涌现能力，例如：

• 跨身份角色替换
• 动物驱动场景
• 对高级控制中间表示（如 SAM3D-Body 网格渲染）的零样本支持

管道图

https://huggingface.co/zai-org/SCAIL-2#%F0%9F%93%A6-model📦 模型

项目详情分辨率端到端驱动支持 512p 和 704p；姿态驱动和替换在 704p 下表现更佳约束H 和 W 必须都能被 32 整除（例如 704×1280）训练混合分辨率和帧率内置模块Wan VAE 和 T5 已集成在检查点中，方便使用 下载后的文件布局：

SCAIL-2/ ├── Wan2.1_VAE.pth ├── model │ ├── 1 │ │ └── fsdp2_rank_0000_checkpoint.pt │ └── latest └── umt5-xxl └── ...

https://huggingface.co/zai-org/SCAIL-2#%F0%9F%9A%80-usage🚀 使用说明

推理代码、环境设置和详细说明均提供在项目仓库中。请参考项目页面 (https://teal024.github.io/SCAIL-E2E/) 和代码仓库了解如何运行模型。

https://huggingface.co/zai-org/SCAIL-2#%F0%9F%93%84-citation📄 引用

@article{yan2025scail, title={SCAIL: Towards Studio-Grade Character Animation via In-Context Learning of 3D-Consistent Pose Representations}, author={Yan, Wenhao and Ye, Sheng and Yang, Zhuoyi and Teng, Jiayan and Dong, ZhenHui and Wen, Kairui and Gu, Xiaotao and Liu, Yong-Jin and Tang, Jie}, journal={arXiv preprint arXiv:2512.05905}, year={2025} }