beta-opsd

本推文串介绍了 β-OPSD，一种后训练抽象，它将 RL 视为监督的编译器，使用策略优化来推导目标，并使用蒸馏进行训练。