microgpt

标签

Cards List
#microgpt

@FGuzmanAI: 仅80 MHz下每秒56,000+ tokens。我将完整Transformer(含KV缓存)烧录到定制芯片中。逐门设计……

X AI KOLs Timeline · 2026-06-13 缓存

一款逐门定制的数字芯片,在仅80 MHz频率下运行含KV缓存的Transformer,实现每秒超过56,000 tokens,并在FPGA上完成原型验证。

0 人收藏 0 人点赞
#microgpt

@VedaAI00: 当 Transformer 被直接「烧录」进硬件,推理速度的量级就变了。 Luthira 展示了在 FPGA 阵列上完整实现的 MicroGPT。没有 GPU,没有 PyTorch,甚至没有 CPU 推理循环,只有一个纯硬件驱动的 Tra…

X AI KOLs Timeline · 2026-05-24 缓存

Luthira 在 FPGA 阵列上完整实现了 MicroGPT,无需 GPU、PyTorch 或 CPU 推理循环,推理速度达每秒 50000+ token,展示了 Transformer 硬件化的潜力。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈