text-segmentation

本文研究了检索增强生成系统中文本块（句子、段落、章节）大小对生成质量、检索精度和计算效率的影响，实验采用了相同的教科书，按不同粒度进行分割。

CobSeg是一种用于对话主题分割的多分支架构，它建模连贯边界并改进词汇转换检测，在多个基准测试上优于先前的非LLM方法。