performance-speedup

标签

Cards List
#performance-speedup

当并行起草器遇上并行推测解码

arXiv cs.CL ↗ · 2026-09-24 缓存

DPara是一个并行推测解码框架,通过预计算草稿表示来消除概率性回退,在Qwen3模型上相比自回归解码实现了平均3.21倍到3.52倍的速度提升。

0 人收藏 0 人点赞
#performance-speedup

Anthropic开源Claude编写的GPU优化,使30多个生物分子模型平均快约4倍

Reddit r/singularity ↗ · 2026-09-17

Anthropic已开源其AI模型Claude编写的GPU优化,显著提升了超过30个生物分子模型的速度,平均提高4倍。

0 人收藏 0 人点赞
#performance-speedup

一种用于高效张量计算的线程-寄存器解耦GPU执行模型

Hacker News Top ↗ · 2026-08-26 缓存

本文提出FIBER,一种新型的GPU执行模型,通过解耦线程-寄存器所有权,实现动态并行和细粒度调度,在AI工作负载(如LLMs)的张量计算中取得显著性能提升。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈