GGML 和 llama.cpp 加入 Hugging Face,保障本地 AI 长期发展

Hugging Face Blog 新闻

摘要

GGML 和 llama.cpp 已加入 Hugging Face,以确保本地 AI 开发的长期可持续性。Georgi Gerganov 的团队将保持对项目的完全自主权,同时获得资源来扩大社区支持并改进 llama.cpp 推理与 transformers 模型定义之间的集成。

暂无内容
查看原文
查看缓存全文

缓存时间: 2026/04/20 17:27

GGML 和 llama.cpp 加入 HF,推动本地 AI 的长期发展

来源:https://huggingface.co/blog/ggml-joins-hf 返回文章 (https://huggingface.co/blog)

  • llama.cpp、开源项目和社区会有什么变化? (https://huggingface.co/blog/ggml-joins-hf#what-will-change-for-llamacpp-the-open-source-project-and-the-community)
  • 技术重点 (https://huggingface.co/blog/ggml-joins-hf#technical-focus)
  • 我们的长期愿景 (https://huggingface.co/blog/ggml-joins-hf#our-long-term-vision)

我们非常高兴地宣布,GGML 的创建者 llama.cpp 正在加入 HF,以保持未来 AI 的开放性。🔥

Georgi Gerganov (https://huggingface.co/ggerganov) 及其团队正在加入 HF,目标是在本地 AI 在未来几年继续指数级发展的同时,扩大和支持 ggml 和 llama.cpp 背后的社区。

我们与 Georgi 和团队合作已有相当长的时间(我们的团队中甚至已经有 llama.cpp 的出色核心贡献者,如 Son (https://huggingface.co/ngxson) 和 Alek (https://huggingface.co/allozaur)),所以这一过程非常自然。

llama.cpp 是本地推理的基础构件,transformers 是模型定义的基础构件,所以这基本上是天作之合。❤️

GGML 加入 Hugging Face

llama.cpp、开源项目和社区会有什么变化?

变化不大 – Georgi 和团队仍然将 100% 的时间投入到 llama.cpp 的维护中,对技术方向和社区拥有完全的自主权和领导权。HF 为该项目提供长期可持续的资源支持,提高了项目增长和繁荣的机会。该项目将像现在一样继续保持 100% 开源和社区驱动。

技术重点

llama.cpp 是本地推理的基础构件,transformers 是模型和架构定义的基础构件,因此我们将致力于确保未来的集成尽可能无缝(几乎“一键式“),以便从 transformers 库的模型定义“真实来源“将新模型部署到 llama.cpp。

此外,我们将改进基于 ggml 的软件的封装和用户体验。随着本地推理成为云推理的有意义且具有竞争力的替代方案阶段的到来,改进和简化普通用户部署和访问本地模型的方式至关重要。我们将致力于让 llama.cpp 无处不在,随处可得。

我们的长期愿景

我们的共同目标是为社区提供构建块,以便在未来几年内使开源超级智能能够被世界各地的人们访问。

我们将与不断增长的本地 AI 社区一起实现这一目标,同时继续构建在我们的设备上尽可能高效运行的终极推理堆栈。

相似文章

使用 llama.cpp 在本地运行的自动化 AI 研究员

Reddit r/LocalLLaMA

ml-intern 是一个面向 AI 代理的工具,它与 Hugging Face 的库集成,现在支持通过 llama.cpp 或 ollama 运行本地模型,使得自动化 AI 研究员可以在笔记本电脑上全天候运行。

GLM-5.2 是本地人工智能的一次胜利

Reddit r/LocalLLaMA

GLM-5.2 是一款拥有 753B 参数、采用 MIT 许可证的开源模型,具备前沿级别的编码能力和超大的上下文窗口。其蒸馏潜力有望为本地 AI 设置带来显著改进。