integer-linear-programming

标签

Cards List
#integer-linear-programming

寻找最优分词器

Hacker News Top · 2026-06-11 缓存

这篇博客文章提出一个使用整数线性规划的算法来计算语言模型的最优分词器,并将其与解决旅行商问题相类比。文中指出,虽然结果在理论上很有趣,但实际的分词器已经接近最优,并且该方法可能不具备良好的泛化能力。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈