behavioral-transfer

标签

#behavioral-transfer

量化语言模型蒸馏中的潜意识行为迁移比率

arXiv cs.LG ↗ · 2026-06-11 缓存

本文量化了语言模型蒸馏中潜意识行为迁移的程度，表明即使使用良性训练数据，不良特征也能稳健地从教师模型迁移到学生模型，并且迁移在不同模型族中表现出不同的规模。

0 人收藏 0 人点赞

← 返回首页

提交意见反馈