@DanKornas:微调本地大语言模型不应需要租用云端GPU。Silicon Studio 是一款开源桌面应用,适用于本地大语言模型的……
摘要
Silicon Studio 是一款开源桌面应用,支持在 Apple Silicon Mac 上使用 MLX 进行本地大语言模型微调和推理,具备数据准备、模型管理和可视化配置等功能。
查看缓存全文
缓存时间: 2026/05/26 08:49
微调本地大语言模型,无需租用云端 GPU。
Silicon Studio 是一款开源桌面应用,专为 Apple Silicon Mac 设计,支持本地大语言模型微调与推理。
它帮助你在一个本地工作流中完成数据准备、模型管理、基于 MLX 的微调以及结果测试,无需再拼凑零散的脚本和笔记本。
核心功能:
• 原生 Apple Silicon 支持——利用 Apple 的 MLX 框架,在 M1/M2/M3/M4 Mac 上实现硬件加速的 LoRA/QLoRA 微调与推理
• 数据准备工作室——预览和编辑 JSONL/CSV 数据集,在本地脱敏 PII,并将 CSV 转换为适用于聊天模板的 JSONL 格式
• Hugging Face 模型管理——浏览、下载和管理 Llama 3、Mistral、Qwen 2.5、Gemma、Phi 等开源模型
• 可视化微调配置——设置学习率、训练轮数、秩数等相关参数,无需完全依赖配置文件
• 本地聊天测试——在类似 ChatGPT 的界面中切换基础模型和微调后的适配器,支持私有/离线推理
它采用开源许可(MIT 协议)。
链接见回复。
相似文章
@ActuallyIsaak:这是一个实际运行的端到端过程,从训练到在LM Studio中使用训练好的LLM,由@lmstudio的MLX-LoRA-Studio提供
MLX-LoRA-Studio 是一款原生的macOS应用,用于在Apple Silicon上微调LLM,提供用户友好的界面,支持多种训练算法,包括SFT、DPO和QAT。它完全开源,允许本地私有微调,无需依赖云端。
Mac 用于本地 LLM 和 Openclaw - 我希望早知道的事
一位用户分享了在 Mac 上运行本地 LLM 的经验,指出与 Nvidia GPU 相比,AI 代理的提示处理较慢,并建议除非隐私问题,否则使用 Deepseek 等云端模型。
@Michaelzsguo: 两天前,我询问是否应该购买 Mac Studio 用于本地运行 LLM。我由衷地感叹收到的反馈如此优质且丰…
作者分享了一份针对本地运行大语言模型(LLM)的硬件购买指南,综合了社区反馈,对比了 Mac Studio、NVIDIA 和 AMD 的选项。
jundot/omlx
oMLX 是一个用于在 Apple Silicon Mac 上进行优化 LLM 推理的新开源工具,具备持续批处理和分层 KV 缓存功能,并通过菜单栏应用进行管理。
@julien_c:Apple Silicon 是本地AI之王吗?
关于Apple Silicon是否是运行本地AI模型的最佳硬件的讨论,引用了一篇相关文章或讨论串。