scaling-strategy

标签

Cards List
#scaling-strategy

面向近无损HiF8 W8A8量化感知训练的最大窗口缩放估计

arXiv cs.LG · 2026-05-27 缓存

本文系统研究了OpenPangu-Embedded-1B的HiF8 W8A8量化感知训练,识别并解决了amax饱和和灾难性遗忘等失效模式,通过64步最大算法DTS策略和500步BF16预热实现了近无损性能。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈