hardware-optimization

标签

Cards List
#hardware-optimization

@TheAhmadOsman:本地AI现在变得简单——将下面的文章交给Codex Cli,并告诉它:- 根据您的硬件推断正确的推理引擎…

X AI KOLs Timeline · 2026-05-21 缓存

推广Codex CLI,该工具可自动推断正确的推理引擎并针对给定硬件优化本地AI性能。

0 人收藏 0 人点赞
#hardware-optimization

@ycombinator:General Instinct (@gen_instinct) 将前沿AI模型部署到受限边缘硬件上,助力机器人技术和物理…

X AI KOLs Following · 2026-05-19

General Instinct 推出一个部署层,使前沿AI模型能够在如 Jetson 和移动 NPU 等受限边缘硬件上运行,帮助机器人技术和物理AI团队实现低延迟离线推理。

0 人收藏 0 人点赞
#hardware-optimization

@berryxia: 一次将大模型的格式搞清楚!盘它! 很多朋友都在讨论大模型的这么多格式,到底有啥区别? 于是想一篇把 GGUF、MLX 这些本地大模型格式弄清楚。 简单说,GGUF 是 llama.cpp 团队搞出来的单文件格式,现在已经是本地推理最主流的…

X AI KOLs Timeline · 2026-05-11

本文详细对比了GGUF、MLX、Safetensors等主流本地大模型文件格式的特点与应用场景,帮助开发者根据硬件环境选择最优格式。

0 人收藏 0 人点赞
#hardware-optimization

小众观点:DGX Spark 论坛的开发者社区天赋异禀,将凭意志力让有缺陷的硬件成功。

Reddit r/LocalLLaMA · 2026-05-08

一篇观点文章,重点介绍蓬勃发展的 DGX Spark 开发者社区,该社区正在协作优化硬件,尽管存在局限性,还提到了 Sparkrun 和 PrismaQuant 等项目。

0 人收藏 0 人点赞
#hardware-optimization

LogosKG:面向硬件优化、可扩展且可解释的知识图谱检索

arXiv cs.CL · 2026-04-22 缓存

LogosKG 提出一种贴合硬件的框架,可在含十亿条边的知识图谱上实现可扩展、可解释的多跳检索;通过度感知分区与按需缓存提升效率,同时不损失保真度。

0 人收藏 0 人点赞
← 返回首页

提交意见反馈