@plantegg: 我现在离职很久了，可以谈谈这个故障，2023年11月12号的这个故障差不多是福报云历史上最严重的故障吧(故障的直接人是我当年面试招的，后来我特意当面找他复盘了一次，所以我很了解哦) 这个故障乘以10倍都不够2026年07月26号菊花云的故…
摘要
一位前员工回顾了福报云（阿里云）2023年11月12日的严重故障，并称2026年7月26日菊花云（华为云）的故障规模是其百倍以上，涉及数百万实例被锁停，凸显云厂商在熔断和人工确认机制上的缺失。
查看缓存全文
缓存时间: 2026/08/14 05:29
我现在离职很久了，可以谈谈这个故障，2023年11月12号的这个故障差不多是福报云历史上最严重的故障吧(故障的直接人是我当年面试招的，后来我特意当面找他复盘了一次，所以我很了解哦)
这个故障乘以10倍都不够2026年07月26号菊花云的故障，我挨个来讲
福报云2023年的故障很简单，有一个例行刷白名单的脚本(运行好多年了)，当时拉取白名单的时候API超时了，导致拉到的白名单不完整，没做校验和错误处理，就当全量白名单下发了——同志们，这个是白名单，少了就访问不通
所以当时OSS、图片等很多服务挂了，也不是服务挂了就是连接鉴权失败，访问不通，当然和挂了没啥区别
ECS 实例、RDS都正常运行，但是如果网络依赖白名单就会访问不通，不过ECS、RDS一般不依赖
福报云20231112这个故障上了新闻和微博头条霸榜，但是把这个故障乘以100倍才刚刚够得上菊花云20260726的故障
菊花云20260726： 凌晨2点，菊花云的管控bug，将所有大客户账号锁定(认为账号欠费)，然后开始将这些客户的所有所有所有的实例(ECS/RDS/网络/负载均衡等等)全部锁定停掉，涉及所有区域
个人猜测被停机的实例数量百万级别以上，正好是美洲的白天，地球另外一端影响巨大，持续时间多久？7点多才开始陆续恢复，持续到11点还有实例恢复中，这个时候管控都在排队拉起实例
这个故障可以说是全球最耸人听闻、不可思议的故障，最基本的熔断都没有，就这样上百万实例半个小时内被关停
但是没有任何新闻，who care？正如有网友说的：还有那个傻逼客户在用菊花云呢？
菊花在做云产品上还没入门，当年我做数据库就出现过一次因为监控数据延迟导致下游触发自动锁定、升配用户实例的case，对这种操作一定要有熔断并人工介入二次确认
希望大家看的过瘾，这两个故障全都是只有在云环境才独有的，自己IDC想搞都搞不出来
相似文章
@dotey: OpenClaw 真的凉凉了吗？ > @凤凰网科技【美团高管反思全员养虾】据媒体报道，美团核心本地商业CEO王莆中表示在公开演讲中，完整复盘了美团内部进行AI变革的过程。 > 谈到今年2月到3月，公司开启全员“养虾运动”，王莆中提及但结果…
美团核心本地商业CEO王莆中在公开演讲中反思公司AI变革失败，导致账单暴涨和运营干扰。
@_FORAB: 去年拼多多的瓜，终于披露细节了 高管遭遇调查，堪比死士，现场吃纸 放着巨量现金储备，不会随波逐流烧 AI 结果最后被罚了 15 亿
拼多多去年高管调查细节曝光：高管销毁证据、公司因违规被罚15亿元，同时未跟风投入AI。
@seclink: 互联网企业释放超20万岗位 “AI+”人才需求攀升 7月2日，人力资源社会保障部发布数据显示，为期一个月的互联网企业云端招聘月活动已于近日开展，5000多家互联网企业集中释放超20万个就业岗位。 记者采访发现，其中AI相关岗位占比持续攀升…
人力资源社会保障部数据显示，5000多家互联网企业在云端招聘月活动中释放超20万岗位，其中AI相关岗位占比持续攀升，反映AI技术加速赋能各行业。
@seclink: 被指“抄代码”：李博杰（前华为“天才少年”、现Pine AI首席科学家）在参加DeepSeek的远程面试时，因习惯使用双屏办公，视线偶尔会看向左侧的副屏。 面试官因此直接指控他在“抄代码”，并要求其自证清白，否则面试无法继续。 当事人反应…
前华为天才少年李博杰在参加DeepSeek远程面试时，因使用双屏办公被面试官指控抄袭，他随即终止面试并公开批评面试流程和缺乏尊重。
@JinYu762: 别只盯着单只科技股，7月财报真正要看的是AI产业链 到底是继续烧，还是市场已经开始降温了 7/7 三星Q2初步业绩：先看存储的温度,HBM、DRAM 价格、AI 服务器需求，都会露出一些风向 7/15 $ASML ：看设备订单,EUV/D…
本文梳理了7月多家科技公司财报中AI产业链的关键看点，包括存储、设备、代工、AI芯片和云服务的需求趋势，强调台积电作为AI供应链的核心位置。