heavy-tailed-self-regularization

本文介绍了一种基于频谱形状的度量，利用重尾自正则化理论来表征、比较和管理大型语言模型。该方法无需数据、计算高效且尺度不变，支持跨多种模型集合的血统追踪、无监督聚类和性能量化。