标签
本文介绍了RLearner-LLM，一个使用混合直接偏好优化（Hybrid-DPO）的框架，旨在平衡LLM生成解释的逻辑正确性和流畅性。该框架在多个领域和基础模型上实现了显著的NLI蕴含改进，同时减轻了标准偏好信号中的冗长偏差。