modular-training

提出PUST，一种新颖的LLM后训练框架，该框架通过轻量级代理模型将奖励探索与分布对齐解耦，从而实现可复用的更新信号以及跨模型的高效弱到强增强。