gpu

标签

Cards List
#gpu

@PyTorch:NVIDIA 的 Ujval Kapasi 在「PyTorch Performance for Agents o…」中探讨智能体工作负载对 PyTorch 技术栈的需求

X AI KOLs Timeline ↗ · 2026-10-20 缓存

NVIDIA 的 Ujval Kapasi 在 PyTorchCon 2026 上发表主旨演讲,阐述智能体工作负载对 PyTorch 技术栈的需求,并以 NVIDIA Vera Rubin 为案例,介绍涵盖 CPU、GPU、内存和网络的软硬件协同设计,以及在 PyTorch、Triton 和 vLLM 上的优化工作。

0 人收藏 0 人点赞
#gpu

@swyx:DeepSeek 在他们的知乎主页上发了更多干货,如果你只看推特,你看到的都是老外认可的内容……

X AI KOLs Timeline ↗ · 2026-10-20 缓存

swyx 指出,DeepSeek 在其知乎页面上分享了更多实质性细节,包括声称其自研推理框架 DeepInfer 每个集群每天可处理约 155 万亿个 token,每 GPU 小时收入达 38 美元;相较于通常每 GPU 小时 5–10 美元的成本,这意味着推理服务的利润率约为 80%。

0 人收藏 0 人点赞
#gpu

DeepInfer:DeepSeek 模型高性能推理框架

Hacker News Top ↗ · 2026-10-20 缓存

DeepSeek 开源了 DeepInfer——支撑其大规模生产服务的高性能推理框架,具备优化内核、MoE 专家并行、投机解码、批不变推理等特性,并支持 NVIDIA SM100 GPU 和华为昇腾 950 NPU。

0 人收藏 0 人点赞
#gpu

@rohanpaul_ai:Marvell 的 Dave Lazovsky 手持一个微小模块,利用光子技术将高带宽内存(HBM + DDR)传输到……

X AI KOLs Following ↗ · 2026-10-20 缓存

Marvell 发布了一款光子模块,可让 HBM 和 DDR 内存与 GPU 相距最远达 50 米,同时将延迟保持在数百纳秒级别,从而在 AI 集群中实现内存与计算的解耦扩展。

0 人收藏 0 人点赞
#gpu

呼唤所有 GPU:帮助我们测试 SonicBoom v0.0.3 —— 一个在解码上超越 llama.cpp 的编译器优先 AI 运行时

Reddit r/LocalLLaMA ↗ · 2026-10-19

HardenedLinux 发布开源编译器优先的 AI 推理运行时 SonicBoom v0.0.3,声称在 RTX 3050 上解码速度超过 llama.cpp,并呼吁社区贡献 GPU 基准测试结果。

0 人收藏 0 人点赞
#gpu

# Modify and load custom VBIOS on Windows and Linux, on Blackwell 2.0 (RTX 50 Series)/Ada(RTX 40 Series)/Ampere (RTX 30 Series) without flashing, for example to lower power limits (and which cards were tested) **在 Windows 和 Linux 上无需刷写即可修改和加载自定义 VBIOS,适用于 Blackwell 2.0(RTX 50 系列)/ Ada(RTX 40 系列)/ Ampere(RTX 30 系列),例如降低功率限制(及测试过的显卡)**

Reddit r/LocalLLaMA ↗ · 2026-10-17

三款新工具让用户无需刷写即可在 Windows 和 Linux 上修改并加载 NVIDIA RTX 30/40/50 系列 GPU 的自定义 VBIOS 镜像,从而实现更高的功耗上限、解锁电压调节以及更大的超频偏移,同时保持显卡原始固件完整。

0 人收藏 0 人点赞
#gpu

Nvidia 官方确认 5090 并未停产,将继续出货

Reddit r/LocalLLaMA ↗ · 2026-10-17 缓存

NVIDIA 官方证实 GeForce RTX 5090 并未停产,将继续出货,以澄清此前的停产传闻。

0 人收藏 0 人点赞
#gpu

Intel LLM-Scaler-vLLM PV 1.5 带来重大改进

Reddit r/LocalLLaMA ↗ · 2026-10-16 缓存

英特尔发布了 LLM-Scaler-vLLM PV 1.5,这是其面向 Arc 显卡硬件的容器化 vLLM 技术栈的一次重大更新,将 vLLM 从 0.14 版升级至 0.26 版,新增了对 Qwen 和 Gemma 模型的支持、FP8/INT4 量化功能,并提升了性能。

0 人收藏 0 人点赞
#gpu

AA-AgentPerf:Vera Rubin 在推理能效方面领先

Reddit r/singularity ↗ · 2026-10-16

Artificial Analysis 的 AA-AgentPerf 基准通过回放真实编码智能体的运行轨迹来测试推理硬件的能效。结果显示,NVIDIA Vera Rubin 在几乎所有速度档位上均位居前沿首位,领先于 DeepSeek V4 Flash/Pro、Kimi K3 和 GLM-5.2/5.3 等模型的测试配置。

0 人收藏 0 人点赞
#gpu

128GB RTX Spark 笔记本仅售 $3832。

Reddit r/LocalLLaMA ↗ · 2026-10-15

HP 正在促销一款全新的 RTX Spark 笔记本(HP OmniBook X),配置 128GB 内存,使用 25% 优惠券后价格为 $3832.49,为预算不到 $4000 的用户提供了一个比 Nvidia DGX Spark 更实惠的选择。

0 人收藏 0 人点赞
#gpu

@TheAhmadOsman:6月购买的GPU和DGX Spark价格至少上涨了1.5倍,顺便说一句,本地AI加速的性能数据很明确

X AI KOLs Timeline ↗ · 2026-10-15 缓存

用户提到6月购买的GPU和DGX Spark价格至少上涨了1.5倍,并指出本地AI加速的性能数据很明确。

0 人收藏 0 人点赞
#gpu

Netflix 如何保障大规模 GPU 任务的持续运行(13 分钟阅读)

TLDR AI ↗ · 2026-10-15 缓存

Netflix 技术博客文章,介绍其如何在大规模训练与推理任务中检测故障 GPU 和网络、自动修复故障机器,并让长时间运行的任务在硬件故障时继续运行。文章强调了 GPU 可靠性对可用性和成本效率的重要性,并解释了为何基础健康检查不足以应对现代 ML 基础设施的需求。

0 人收藏 0 人点赞
#gpu

@coffeecup2020: 哇,我刚收到了来自传奇人物 @no_stp_on_snek Tom Turney 的第一笔咖啡捐赠,他的 Turbo Quant 工作一直……

X AI KOLs Timeline ↗ · 2026-10-14 缓存

tqLLM 是一个 C++/CUDA 本地 LLM 推理引擎,支持 OpenAI 兼容 API 与 TurboQuant GGUF 权重,在 RTX 3090 和 RTX 5060 Ti 上实现 240+ tok/s 的解码速度、200K+ 长上下文以及不改变输出的投机解码。

0 人收藏 0 人点赞
#gpu

英伟达的首款 GPU:GeForce 256

Hacker News Top ↗ · 2026-10-14 缓存

回顾Nvidia于1999年10月11日发布GeForce 256——首款被其称为GPU的产品,以及Sega当年500万美元投资如何帮助Nvidia渡过难关并最终击败3dfx的历史故事。

0 人收藏 0 人点赞
#gpu

@modal:使用 RL 训练大型模型通常在由最新加速器组成的固定同构集群上进行,以确保数值稳…

X AI KOLs Timeline ↗ · 2026-10-13 缓存

我们使用全异步强化学习,通过混合精度、混合加速器采样器,在智能体编程任务上训练了一个模型,并通过应用离策略校正,以更低的成本实现了与同构集群相当的训练稳定性。

0 人收藏 0 人点赞
#gpu

DLSS 5 在下月《霍格沃茨之遗》首秀中有所缩水

The Verge ↗ · 2026-10-13 缓存

英伟达的 DLSS 5 将于 11 月 5 日在《霍格沃茨之遗》中首次亮相,在玩家强烈反对后,其对面部和环境画面的改动已大幅减弱;与此同时,10 月的更新让该模型在 RTX 50 系列 GPU 上运行速度提升一倍,参数量减少了 24%。

0 人收藏 0 人点赞
#gpu

英特尔“Crescent Island”GPU 获命名为 D 系列,支持高达 480 GB 的 LPDDR5X 内存

Reddit r/LocalLLaMA ↗ · 2026-10-12 缓存

Intel 的“Crescent Island”GPU 获得了 D 系列命名,并支持最高 480 GB 的 LPDDR5X 内存,主要面向数据中心 AI 加速场景。

0 人收藏 0 人点赞
#gpu

@IntelTech:今日发布,Intel GPU D 系列基于 Xe3P 架构打造,专为驱动 agentic AI 而优化。这款风冷……

X AI KOLs Following ↗ · 2026-10-12 缓存

Intel 发布基于 Xe3P 架构、专为 agentic AI 优化的 GPU D 系列,这款风冷 PCIe 5.0 显卡支持 vLLM 与开源 PyTorch 生态中的主流开放模型。

0 人收藏 0 人点赞
#gpu

Intel D270 GPU AI 加速器–最高配备 480 GB LPDDR5X

Hacker News Top ↗ · 2026-10-12 缓存

英特尔发布面向推理优化的数据中心 GPU D270,配备最高 480GB LPDDR5X 内存、32 个 Xe3P 核心与 256 个 XMX 引擎,采用 350W 风冷 PCIe 5.0 标准形态,专为智能体 AI 和长上下文推理工作负载设计。

0 人收藏 0 人点赞
#gpu

@TheAhmadOsman:你不觉得你的 GPU 会自己租用 GPU,来训练出更好、更先进的自己吗

X AI KOLs Timeline ↗ · 2026-10-12 缓存

一段 Twitter 上的交流,探讨 GPU 是否最终会租用更多 GPU 来训练更先进的自身版本,同时指出,算力不足和 token 生成不足在未来多年里仍将是 AI 进步的瓶颈。

0 人收藏 0 人点赞
← Previous
Next →
← 返回首页

提交意见反馈