residual-gates

标签

Cards List
#residual-gates

一个通道都不落下:通过残差门控理解扩散加速

arXiv cs.LG ↗ · 2026-11-02 缓存

该论文表明,REPA 和分散正则化等扩散模型训练加速方法主要重组 AdaLN-Zero 残差门控 α,并提出了一种无需教师模型的径向目标,通过扩大门控参与范围,改善 SiT-B/2 在 ImageNet 256×256 上的 FID。

0 人收藏 0 人点赞
#residual-gates

不遗漏任何通道:通过残差门控理解扩散加速

Hugging Face Daily Papers ↗ · 2026-10-29 缓存

该论文提出扩散Transformer的训练加速部分源于AdaLN-Zero残差门控α的重组,并引入归一化参与度比(nPR)和一种无教师的径向目标,在ImageNet 256x256上以SiT-B/2改进了FID。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈