数百万美元AI资金背后:企业GPU平均利用率仅5%,推理成本与所有权成本从34%升至41%
摘要
急于购买大规模GPU集群部署AI的企业,如今面临低利用率(5%)和成本飙升(推理加所有权成本从34%升至41%)的困境,凸显AI部署中的重大基础设施低效问题。
嗯,在ChatGPT推出后的几年里,企业争相购买大规模GPU集群,因为AI需求爆发且算力稀缺。但我认为现在这不仅仅取决于利用率,还涉及调度、推理效率、路由、治理、能源接入和运营管理等多个方面。讽刺意味十足:本应最高效改善人类生活的技术,却存在如此庞大的基础设施低效问题,大部分预算都花在了硬件资源分配上。
来源:https://winbuzzer.com/2026/05/11/enterprises-face-underused-gpu-fleets-as-ai-costs-rise-xcxwbn
相似文章
为什么计算成本未来几年可能上涨10倍(8分钟阅读)
本文分析了未来几年可能促使AI计算成本上涨10倍的因素,包括实验室收入、利润率和现货价格的上涨,同时指出推理支出的增加可能预示着进展停滞。
AI太贵了
文章认为,对于大多数公司而言,人工智能过于昂贵,在经济上不可行。超大规模云服务商在数据中心上花费了数万亿美元,但却未能产生相应的人工智能收入。文章指出,只有像NVIDIA这样的硬件供应商才能从当前的人工智能泡沫中受益。
因成本过高,企业正在限制员工使用AI
各行业的公司因成本飙升而限制员工使用AI并转向更便宜的模型,部分公司支出增至三倍,每月超过1500万美元。
'AI上瘾'的公司每月每位员工在AI上花费7500美元
企业AI支出持续增长,顶级公司每月每位员工在AI上花费7500美元,但仍低于工程师平均薪资。Ramp AI Index的研究显示,各公司的采用率差异显著。
AI真的越来越贵了吗?
探讨AI成本是否在增加,讨论AI开发和部署费用的趋势。