control-variate

提出了vOPD，通过引入强化学习中的控制变量基线，稳定了大语言模型的在策略蒸馏，实现了与昂贵全词表方法相当的性能，同时计算成本更低。