moE-vs-dense

标签

#moE-vs-dense

Qwen 35B-A3B MoE 与 27B dense 本地编码测试对比：速度快约 4 倍，质量差距远小于预期

Reddit r/LocalLLaMA ↗ · 2026-08-08

一项本地实验，在代码维护任务上比较 Qwen 35B-A3B MoE 和 Qwen 27B dense，发现 MoE 模型速度快约 3.9 倍，且质量差距比预期更小。

0 人收藏 0 人点赞