c-cpp

标签

Cards List
#c-cpp

llama.cpp 支持 Cohere 模型

Reddit r/LocalLLaMA ↗ · 2026-10-19 缓存

llama.cpp 新增对 Cohere 系列模型的支持,继续扩展其 C/C++ 本地 LLM 推理框架的模型兼容性。

0 人收藏 0 人点赞
#c-cpp

现在你可以在土豆上种盆景了

Reddit r/LocalLLaMA ↗ · 2026-10-11 缓存

llama.cpp 项目介绍:一个以 C/C++ 实现的轻量级 LLM/VLM 推理引擎,支持多种硬件后端,可在从服务器到树莓派等各类设备上运行,并提供命令行工具与 OpenAI 兼容的 API 服务。

0 人收藏 0 人点赞
#c-cpp

如何修复 autoconf 式的配置探测

Hacker News Top ↗ · 2026-10-08 缓存

build2 的 Boris Kolpackov 撰文分析 autoconf/CMake 式编译探测配置的四大问题(浪费、脆弱、缓慢、缺乏变更追踪),并提出基于期望(expectation-based configuration)的替代方案。

0 人收藏 0 人点赞
#c-cpp

Resident Evil 4 (GameCube) – 完全的字节级一致反编译至 C/C++

Hacker News Top ↗ · 2026-09-20 缓存

一个 GitHub 仓库提供了《Resident Evil 4》为 Nintendo GameCube 完全反编译至 C/C++,确保字节级一致,并包含构建工具和验证方法以重现原始二进制文件。

0 人收藏 0 人点赞
#c-cpp

Release b11003 · ggml-org/llama.cpp

Reddit r/LocalLLaMA ↗ · 2026-09-16 缓存

llama.cpp 发布版本 b11003,这是一个 C/C++ 工具,可在各种硬件上以最少的设置实现高效的大语言模型推理。

0 人收藏 0 人点赞
#c-cpp

你现在可以在GLM-Air中使用MTP

Reddit r/LocalLLaMA ↗ · 2026-08-23 缓存

llama.cpp现在支持GLM-Air模型的MTP(多令牌预测),增强了C/C++中大型语言模型的推理能力。

0 人收藏 0 人点赞
#c-cpp

Llama.cpp v0.1.0

Hacker News Top ↗ · 2026-08-17 缓存

Llama.cpp v0.1.0 是用于高效 LLM 和 VLM 推理的 C/C++ 实现,支持广泛的硬件,配置简单且性能卓越。

0 人收藏 0 人点赞
#c-cpp

DFlash 支持已合并到 llama.cpp

Reddit r/LocalLLaMA ↗ · 2026-06-28 缓存

DFlash 支持已合并到 llama.cpp,提升了兼容模型的推理性能。

0 人收藏 0 人点赞
#c-cpp

kv-cache : 避免kv cells复制 by ggerganov · Pull Request #24277 · ggml-org/llama.cpp

Reddit r/LocalLLaMA ↗ · 2026-06-08 缓存

ggerganov的此pull request优化了llama.cpp中的kv-cache,以避免不必要的kv cells复制,从而提升推理性能。这是对开源LLM推理库llama.cpp的一个贡献。

0 人收藏 0 人点赞
#c-cpp

llama : 网站 + 统一的 `llama` 二进制文件 · ggml-org/llama.cpp · 讨论 #23875

Reddit r/LocalLLaMA ↗ · 2026-05-29 缓存

Llama.cpp 宣布推出新网站和统一的 'llama' 二进制文件,以简化 LLM 推理,同时还包括 Hugging Face 缓存迁移和多模态支持等更新。

0 人收藏 0 人点赞
#c-cpp

server, webui: 支持在推理模型上继续生成,由 ServeurpersoCom · 拉取请求 #22727 · ggml-org/llama.cpp

Reddit r/LocalLLaMA ↗ · 2026-05-13 缓存

此拉取请求在 llama.cpp 服务器和 WebUI 中添加了对推理模型继续生成的支持。

0 人收藏 0 人点赞
#c-cpp

leejet/stable-diffusion.cpp

GitHub Trending (daily) ↗ · 2026-09-24 缓存

一个用于扩散模型的轻量级 C/C++ 推理引擎,支持广泛的图像和视频生成模型,并积极开发,对新发布提供日零支持。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈