vram-usage

标签

Cards List
#vram-usage

@BenjaminDEKR: 这里是我对NVIDIA 5070 Ti GPU(16GB显存)上Qwen-Image-2.1的测试结果 它能运行,并且相当快。大约25秒生成1024²图像…

X AI KOLs Timeline ↗ · 2026-09-20 缓存

在NVIDIA 5070 Ti GPU上对Qwen-Image-2.1的测试表明,它能在16GB显存内运行,生成1024²图像的时间约为25秒,并突出了出色的提示词遵循和排版能力。

0 人收藏 0 人点赞
#vram-usage

Qwen3.8-27B:更慢的词元,更快更好的结果

Reddit r/LocalLLaMA ↗ · 2026-08-18 缓存

Qwen3.8-27B 是一款新型人工智能模型,强调实际运行时间而非词元生成速度,能在配备32GB显存的消费级硬件上本地部署,并提供卓越的智能表现。

0 人收藏 0 人点赞
#vram-usage

PSA:llama.cpp 现在默认加载任何 draft-mtp 架构的 MTP 张量,即使 MTP 被禁用

Reddit r/LocalLLaMA ↗ · 2026-07-29

最新版本的 llama.cpp 现在会自动为 draft-mtp 架构加载 MTP 张量,即使未启用推测解码,这可能会增加其 GGUF 文件中捆绑了 MTP 块的用户的显存使用量。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈