domain-normalization

标签

#domain-normalization

超越教师分配：领域归一化多教师在策略蒸馏

Hugging Face Daily Papers ↗ · 2天前缓存

本文提出了领域归一化多教师在策略蒸馏（DN-MOPD），以解决合并专家语言模型时反馈不平衡的问题，并在数学和指令跟随等基准测试中展示了性能提升。

0 人收藏 0 人点赞

← 返回首页

提交意见反馈