DeepSeek V5 计划在华为昇腾芯片上进行预训练

Reddit r/LocalLLaMA 新闻

摘要

据《星报日报》记者多方供应链消息,DeepSeek 下一代大模型 DeepSeek V5 计划在华为昇腾芯片上进行预训练,此前昇腾主要用于 DeepSeek 模型的推理任务。这将是国产算力首次支撑大模型预训练阶段,并伴随 DeepSeek 与华为在昇腾软件栈上的深度协同开源。

来源:https://mp.weixin.qq.com/s/R-1u2exLwZMOu7AITyU5kg 《星报日报》记者从产业供应链多方消息获悉,DeepSeek 下一代大模型 DeepSeek V5 计划使用昇腾芯片进行预训练。此前,华为昇腾芯片主要用于 DeepSeek 大模型的推理任务。 根据公开信息,DeepSeek 模型在昇腾平台上的首次大规模部署发生在 2025 年春节前后。浙江大学传媒与国际文化学院执行院长方兴东在《昇腾的崛起》一书中提到,2025 年 1 月 28 日,华为高层下达指令,要求华为云为 DeepSeek 提供快速支持。从除夕到大年初二,华为与 DeepSeek 完成了 3000 多颗昇腾芯片的部署与验证,成功在华为云贵安数据中心承载了 DeepSeek-V3/R1 模型。 该书还提到,DeepSeek 的爆发式增长极大地振奋了任正非;整个春节期间,他亲自指挥华为云及相关产品团队应对流量的激增。同年 1 月,SiliconFlow 与华为云基于昇腾平台推出了 DeepSeek-V3 和 R1 的推理服务。 2026 年 4 月 DeepSeek-V4 发布后,华为表示,通过"芯片与模型的协同",其全系昇腾"超节点"产品可为 DeepSeek V4 模型系列提供全面支持。DeepSeek 在其官方 API 页面上指出,V4-Pro 模型的服务吞吐量仍受限于高端算力的可用性;不过,预计随着昇腾 950 超节点系列在下半年进入大规模量产,Pro 版本的价格将大幅下降。 9 月 30 日,DeepSeek 宣布开源面向华为昇腾计算平台的基础设施组件,包括 TileLang 高级语言编译工具、高性能计算库(如 DeepGEMM、FlashMLA、TileKernel 和 DeepSelect)以及分布式通信库 DeepEP——这些都对应此前为 NVIDIA 平台发布的开源组件。 华为提供了共同定义的"Ascend SuperPoD Flex"架构和 UBL128 组网方案,并开放了 Ascend C 编程接口和底层指令集以支持 TileLang。这一点意义重大,因为 DeepSeek 不只是在昇腾上做推理,而是在基础层面系统性地与昇腾软件栈对齐并协同开发——将适配延伸到支撑训练与推理的底层基础设施。 目前国产算力的部署主要集中在推理领域,训练方面仍需进一步突破。最近,由深圳河套学院 AI 训练平台、哈尔滨工业大学(深圳)、深圳大数据研究院以及华为相关团队组成的项目团队,基于国产昇腾 910C 处理器的 AI 算力集群,完成了拥有 1.6 万亿参数的大模型 DeepSeek-V4-Pro 的全参数后训练。需要注意的是,这一训练过程不包含最初的预训练阶段。 国产芯片在推理方面的大规模验证增强了行业信心,但训练生态迁移的成本仍是决定市场最终潜力的关键变量。如果 DeepSeek 下一代大模型使用华为昇腾计算平台进行预训练,它将首次回答一个长期以来一直只遭到质疑的问题:"中国顶尖的大模型能否在国产算力硬件上完成预训练?"
查看原文

相似文章