associative-algebra

标签

Cards List
#associative-algebra

更换乘积,保留参数:Transformer的关联代数层

Hugging Face Daily Papers ↗ · 6天前 缓存

本文研究了将Transformer层中的矩阵乘法替换为关联代数积,以在保留参数的同时降低计算成本,证明了其可行性,提高了吞吐量,但存在一些性能权衡。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈