adaptive-tokenizer

KATok是一种自适应视频分词器，通过选择性丢弃信息量不足的令牌来实现数据依赖压缩，提升基于扩散的视频生成中的空间一致性。