performance-walls

标签

Cards List
#performance-walls

Transformer 可扩展性危机:现代语言模型中性能墙的首次全面实证分析

arXiv cs.LG · 2026-05-18 缓存

本文对 118 个 Transformer 模型进行了首次大规模实证分析,揭示了关键的性能墙,其中成功率从 512 token 时的 88.1% 下降到 2048 token 时的 0%,挑战了主流的缩放假设。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈