@Saboo_Shubham_:有人刚刚在单个CPU和8.24 GB内存环境下运行了拥有2.78万亿参数的Kimi k3模型。100%开源。
摘要
据报道,有人仅用8.24 GB内存就在单个CPU上运行了拥有2.78万亿参数的开源Kimi k3模型,展现了极高的效率。
有人刚刚在单个CPU上仅用8.24 GB内存运行了拥有2.78万亿参数的Kimi k3模型。100%开源。https://t.co/9VCtiNXK9Z
查看缓存全文
缓存时间: 2026/08/03 05:34
刚刚有人在单颗CPU、8.24 GB内存下跑起了2.78万亿参数的Kimi k3。100%开源。https://t.co/9VCtiNXK9Z
相似文章
在 C 语言中、于 CPU 上运行 Kimi K3(c99 和 cpu)
一个项目声称可以通过从 NVMe SSD 流式加载专家权重并使用 MXFP4 压缩,在仅有 8GB 内存的 CPU 上运行拥有 2.78T 参数的 MoE 模型 Kimi K3,以速度换取内存效率。
使用29 GB内存以0.50 tok/s运行Kimi K3
WASTE是一个新的开源C语言推理引擎,它从磁盘流式加载专家权重,在仅29 GB内存的消费级笔记本电脑上运行拥有2.78万亿参数的Kimi K3模型,实现了0.49–0.54 tokens/s的速度。
@UnTalNixon_exe: 忘掉GPU和百万美元集群吧。他们刚刚让全球最大的开源模型(Kimi K3 – 2.78万亿参数)……
一个名为 kimi-k3-in-c 的新工具,在单个 CPU 上以低至 8.24 GB 的内存运行 2.78T 参数的 Kimi K3 开源模型,从磁盘流式加载专家,并以每 token 10-32 秒的确定性输出运行。
@kirillk_web3:你明白 Kimi K2.6 刚刚发布意味着什么吗?开源。免费。1 万亿参数。这才是大家没在谈论的关键……
Kimi K2.6 作为一款免费、开源的 1 万亿参数模型正式推出,能够运行 300 个并行智能体以进行持续执行,据报在 SWE-Bench Pro 任务上的表现优于 Claude Opus 4.6。
用户成功通过25GbE以太网在80块RTX 5090上运行Kimi K3。
用户使用仅GDDR7和以太网(无HBM)在80块RTX 5090 GPU上运行Kimi K3,这是一个2.8T参数的开放权重MoE模型,实现了单流20 tok/s,这是首个在消费级硬件上运行的前沿模型。