token-trimming

标签

Cards List
#token-trimming

SFT到底应该学习哪些标记?基于标记修剪的数学推理视角

arXiv cs.AI · 5天前 缓存

本文介绍了TrimSFT,一种用于监督微调的标记级重加权方法,通过聚焦中间logit间隔标记来增强数学推理,相比标准SFT显示出显著的性能提升。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈