off-policy-updates

SAPO引入了一个平滑、温度控制的门控机制，以自适应地减弱强化学习中的离策略更新，与使用硬裁剪的方法相比，提升了训练稳定性和性能。