@j_golebiowski: 从头开始构建任务特定的本地模型需要多长时间:- 25个手写示例(一个下午)- e…
摘要
描述了一种工作流程,可以在一天之内使用25个手写示例、合成数据扩展、LoRA微调和量化以在CPU上推理,构建一个任务特定的本地模型。
从头开始构建任务特定的本地模型需要多长时间:
- 25个手写示例(一个下午)
- 使用教师模型扩展到约10k合成数据
- LoRA微调,4个epoch
- 量化以在CPU上运行
总时间:不到一天。
查看缓存全文
缓存时间: 2026/07/16 04:05
构建一个特定任务的本地模型需要多长时间(从开始到完成):
- 25个手写示例(一个下午)
- 使用教师模型扩展到约1万个合成样本
- LoRA微调,4个epoch
- 量化以在CPU上运行
总计:不到一天。
相似文章
@neural_avb:观看这个45分钟的视频,学习如何创建合成数据集并训练针对狭窄任务的小型(1亿参数)本地语言模型…
一个45分钟的视频教程,关于创建合成数据集并训练针对狭窄任务的小型(1亿参数)本地语言模型,提供了代码和资源。
不存在的模型,于是你自己把它造了出来
一篇 Hugging Face 博客详细介绍了用户如何通过提示词引导 ML Intern 智能体,在短短几天内构建出六个自定义小模型,其中包括将 Qwen-Image 2.1 中 9B 参数的提示词重写器蒸馏为仅 0.8B、可在 CPU 上运行的轻量版本,算力成本仅 16 美元;文中还分享了让这一流程稳定可靠的提示词技巧,包括基线检查、冒烟测试和预算上限设置。
@h100envy: Liquid AI的后训练主管解释了如何在20分钟内构建一个不到1GB的设备端小模型 -…
Liquid AI的后训练主管解释了如何使用LFM2.5、on-policy偏好对齐、智能体RL、课程训练和迭代模型合并,在20分钟内构建一个小于1GB的设备端模型,其工具调用可靠性超越了更大的模型。
我如何在真实编码中使用本地模型
作者分享了他们在真实编码任务中使用本地AI模型的经验。
结构化工作流与小规模本地模型的力量
作者详细介绍了使用小型本地模型(Qwen3.5 9B)结合结构化工作流和map-reduce模式来管理上下文限制、构建自定义智能体循环的经验,并已用其取代Claude Code处理大部分任务。