moral-representations

标签

Cards List
#moral-representations

输出稀释:MoE 模型中冗余但脆弱的表示

arXiv cs.LG · 2026-08-27 缓存

本文揭示,Mixture-of-Experts 模型在探测中编码道德内容的鲁棒性与密集模型相当,但由于输出稀释,它们更为脆弱。输出稀释是指聚合的专家输出稀释了信号,使表示容易受到噪声的影响。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈