io-aware

标签

Cards List
#io-aware

@_avichawla: 研究人员将KMeans提速200倍。这一新技术也超越了cuML和FAISS等方法。Flash-KMeans是一种…

X AI KOLs Timeline · 2026-06-16 缓存

Flash-KMeans是精确KMeans的一种I/O感知实现,它围绕现代GPU瓶颈重新设计了算法,通过消除冗余的内存读写,相比cuML实现了33倍加速,相比FAISS实现了200倍加速。

0 人收藏 0 人点赞
#io-aware

TIDE:基于I/O感知专家卸载的高效无损MoE扩散LLM推理

Hugging Face Daily Papers · 2026-05-19 缓存

TIDE 是一种用于扩散大型语言模型的无损推理系统,它利用专家激活的时间稳定性来减少 I/O 开销和计算,在单 GPU-CPU 系统上实现高达 1.4-1.5 倍的吞吐量提升。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈