4090

标签

Cards List
#4090

@AlpinDale: GLM-5.2-FP8在4个节点的4090-48GB上运行,解码速度约28 tok/s。这些节点通过以太网的互连速度为10吉比特……

X AI KOLs Following · 2026-07-08 缓存

AlpinDale称,在4个节点的RTX 4090(48GB)上运行GLM-5.2-FP8,通过10吉比特以太网实现约28 tok/s的解码速度,并计划使用DSpark进行优化。

0 人收藏 0 人点赞
#4090

96gb+ 的4090和5090完全是骗局。我亲自改装过这些显卡

Reddit r/LocalLLaMA · 2026-06-27

一位GPU改装者警告称,截至2026年6月,96GB的4090和5090显卡并不存在,它们是利用买家绝望心理的骗局。

0 人收藏 0 人点赞
#4090

在4090上以高达475t/s运行DiffusionGemma 26b……以及一些想法

Reddit r/LocalLLaMA · 2026-06-18

一位用户分享了他们在4090 GPU上通过vLLM运行DiffusionGemma 26B的经验,速度高达475t/s,但指出了单用户限制、准确度较低和上下文短等缺点,并认为它不值得替代常规的26B模型。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈