expert-masking

本文提出一种使用基于幅值的专家掩码对混合专家模型进行系统敏感性分析的方法，发现后层对抗掩码更具韧性，这为模型压缩提供了实用途径。