ForcingBooster:用于快速自回归视频扩散的自适应分块去噪

Hugging Face Daily Papers 论文

摘要

ForcingBooster 提出一种自适应逐 patch 去噪框架,根据视频块难度动态分配去噪步数,在保持画质的同时将总去噪步数减少约 50%,加速自回归视频扩散模型的生成。

自回归视频扩散模型已成为实时交互式视频生成和视频世界建模的主流方法。然而,现有方法在生成下一个视频片段时,通常会在空间上均匀分配计算资源,对所有图像块采用相同的去噪调度和函数评估次数。这忽略了视频内容的空间异质性:静态、简单或重复出现的区域通常更容易去噪,而其他区域则需要进一步细化或更多上下文。因此,统一的计算预算会在容易处理的图像块上造成冗余计算,而减少固定步数又可能导致难以处理的图像块细化不足。我们提出了 ,这是一个为各个图像块动态分配去噪步数的通用框架:容易处理的图像块提前停止去噪以提高效率,而难以处理的图像块则获得更多细化步骤。这一设计能够加速生成,同时仅带来可忽略的质量下降。我们的方法兼容大多数现有的少步自回归扩散模型,仅需一个经过少量训练的轻量级路由模块。实验表明, 在保持与四步基线相当的视觉质量的同时,将应用于视频图像块的去噪总步数减少了约 50\\%。
查看原文
查看缓存全文

缓存时间: 2026/10/16 11:03

论文页面 - ForcingBooster:用于快速自回归视频扩散的自适应逐图块去噪

来源:https://huggingface.co/papers/2610.12625

摘要

一种根据难度动态为视频图块分配去噪步数的框架,在保持质量的同时将计算量减半.

自回归视频扩散模型 (https://huggingface.co/papers?q=Autoregressive%20video%20diffusion%20models)已成为实时交互式视频生成和视频世界建模的主流方法。然而,现有方法在生成下一个视频片段时,通常在空间上均匀分配计算资源,使用相同的去噪调度和函数评估次数来更新所有图块。这忽略了视频内容的空间异质性 (https://huggingface.co/papers?q=spatial%20heterogeneity):静态、简单或反复出现的区域通常更容易去噪,而其他区域则需要进一步细化或更多上下文。因此,统一的计算预算会导致在简单图块上进行冗余计算,而减少固定步数又可能使困难图块得不到充分细化。我们提出了 ,这是一种为各个图块动态分配去噪步数 (https://huggingface.co/papers?q=denoising%20steps)的通用框架:简单图块提前停止以提高效率,而困难图块则获得更多细化步骤。这一设计能够加速生成,同时质量下降微乎其微。我们的方法兼容大多数现有的少步自回归扩散模型,仅需要一个经过少量训练的轻量级路由模块 (https://huggingface.co/papers?q=routing%20module)。实验表明, 将应用于所有视频图块的去噪总步数 (https://huggingface.co/papers?q=denoising%20steps)减少了约 50\%,同时保持了与四步基线相当的视觉质量。

查看 arXiv 页面 (https://arxiv.org/abs/2610.12625)查看 PDF (https://arxiv.org/pdf/2610.12625)项目页面 (https://igl-hkust.github.io/ForcingBooster)GitHub2 (https://github.com/IGL-HKUST/ForcingBooster)添加到合集 (https://huggingface.co/login?next=%2Fpapers%2F2610.12625)

在你的智能体中获取这篇论文:

hf papers read 2610\.12625

还没有最新的 CLI?curl \-LsSf https://hf\.co/cli/install\.sh \| bash

引用此论文的模型0

没有链接到此论文的模型

在模型的 README.md 中引用 arxiv.org/abs/2610.12625,即可从此页面链接到该模型.

引用此论文的数据集0

没有链接到此论文的数据集

在数据集的 README.md 中引用 arxiv.org/abs/2610.12625,即可从此页面链接到该数据集.

引用此论文的 Spaces0

没有链接到此论文的 Space

在 Space 的 README.md 中引用 arxiv.org/abs/2610.12625,即可从此页面链接到该 Space.

包含此论文的合集1

相似文章

RepForcing:面向自回归视频蒸馏的表示空间初始化

Hugging Face Daily Papers

论文提出 RepForcing,通过表示空间监督(而非中间教师的轨迹回归)来初始化少步自回归视频生成器,并结合非对称 DMD,在 4 步采样下 VBench 总分从 84.04 提升至 84.66,VisionReward 提升约 59%。

Flex-Forcing:迈向统一的自回归与双向视频扩散模型

Hugging Face Daily Papers

介绍 Flex-Forcing,一个统一的训练和推理框架,通过灵活的时间与去噪步骤分块机制,使视频扩散模型能在双向和自回归两种模式下运行,实现更好的视频质量、长视频稳定性和更快的推理速度。

用于高效自回归视频生成的推测式强制

Hugging Face Daily Papers

推测强制通过将中间的干净估计视为草稿并提前接受词元、跳过不必要的去噪步骤,加速少步自回归视频生成,在 LongLive 上以每词元约 1.7 步达到四步生成器的质量,速度提升超过 1.5 倍。