标签
该论文通过在 Agda 中形式化正字法约束并开发可证明正确的分词修复方案,解决了大型语言模型应用于 Brahmic Scripts 时的分词错误问题,并在 SentencePiece 和 Rust 库中实现了实际应用。