subspace-geometry

本文提出GCPO，一种用于诊断和约束基于rollout的大语言模型强化学习中的子空间几何的方法，在推理、编程和工具使用任务上相较于GRPO及其变体提升了稳定性和性能。