2018年7月20日,北京清博数控科技有限公司——一家机械行业媒体、微信公众号“前沿数控”背后的初创企业——在腾讯云上租用的一台CVM的操作系统云盘发生文件系统元数据损坏。腾讯云将其归因于物理硬盘固件缺陷导致的静默错误:读回的数据与写入的数据不一致。文件系统专家和厂商专家均无法恢复数据。在平台上运行八个月后,该客户丢失了全部数据,包括备份。

8月5日,该客户在微博上发帖,争议由此公开。腾讯发布回应:退还实际消费3569元——这是其服务协议允许的最高金额——另加132900元现金或代金券,并指出这是该客户历史全部消费的37倍。客户主张的损失为1101.6万元。腾讯称客户还曾要求投资和流量支持;客户则表示是在被告知恢复无望后才提出这些要求。次日,腾讯承认员工违反了数据迁移操作规范,并宣布进行改进——但没有立即给出解决方案。

业内工程师对双方都做了剖析。客户只购买了一台仅含系统盘的CVM——没有数据盘、没有负载均衡、没有云外备份——而腾讯大力宣传的99.9999999%数据可靠性和三副本存储适用于云数据盘,并不明确适用于操作系统盘。客户创始人反驳称,腾讯以三副本宣传十亿分之一的故障概率,因此他相信无需额外备份。这一事件成为中国云计算行业关于可靠性数字究竟覆盖什么的教科书式争论。

一家媒体初创企业丢失了包括备份在内的全部数据;其索赔1100万元(约合160万美元);腾讯提出退还3569元并赔付132900元——约为该客户云上消费的37倍

腾讯在固件存在缺陷的硬盘上执行数据迁移操作,事后承认员工违反了操作规范——这正是静默错误背后的不当操作。

所宣传的99.9999999%可靠性和三副本存储并不覆盖单台CVM的系统盘,因此这一醒目的数字制造了该架构无法支撑的信心。

合同将赔偿责任限制在已付费用附近——约为索赔损失的1%——而客户未保留独立备份,导致财务和数据上都没有退路。

赔偿方案在数据丢失十四天后才提出,被解读为敷衍,将一次运营故障转化为中国第二大公有云的公开信任危机。

九个九的可靠性是营销数字,不是架构:一台虚拟机、一块操作系统盘、没有备份,会把一次罕见故障变成彻底损失。要弄清SLA覆盖什么——以及合同赔付什么。

腾讯将所有搭载缺陷固件的硬盘下线,其8月7日的声明宣布了运营改进,同时承认数据迁移过程中存在违规操作。资金差距——提出赔付136469元,而索赔1101.6万元——从未公开弥合。此案成为中国云行业的两句话教训:无论SLA怎么写,都要在服务商之外保留备份;要把可靠性数字理解为覆盖特定产品,而非你的架构。腾讯云保住了第二的位置;每当服务商宣传九个九时,此案仍会被提起。

从这里,追溯依据

参考来源

  1. Tencent Cloud user claims $1.6 million compensation for data loss TechNode · technode.com ·
  2. Tencent Cloud says 'improper operations' led to data loss for client as it seeks to implement improvements South China Morning Post · scmp.com ·
  3. 腾讯云故障致客户数据丢失,遭千万索赔 36Kr (reprint of Yicai reporting) · 36kr.com ·