发生了什么
2016年2月,Telstra——澳大利亚最大的电信运营商,其高端定价建立在拥有全国最可靠网络的基础之上——遭遇了一次大规模移动网络中断,事后它将其描述为“令人尴尬的人为失误”。这是当年四次全国性故障中的第一次。3月,一条国际电缆故障导致全国移动网络中断四小时,首席执行官Andy Penn公开道歉。5月,一次有缺陷的软件升级使全国客户的ADSL和NBN互联网服务瘫痪。
5月的互联网中断破坏性最大。在高峰时,它影响了Telstra约10%的互联网客户——约37万人——其中一些人断网数日。在中断期间,Telstra两次公开宣称一切已修复,而客户仍处于断网状态,将一次技术故障变成了信任危机。Telstra最终向长时间断网的客户提供了25澳元的自动补偿。
财务上的清算紧随其后。5月初,Telstra承诺为其移动网络额外投入5000万澳元;6月29日,Penn宣布将2.5亿澳元的资本支出转投网络基础设施。就在第二天,网络再次瘫痪。Penn承认,在Telstra未能达到全年净推荐值目标后,他将失去部分奖金,而德意志银行的一项调查估计,移动用户流失率可能从11%攀升至19%。
这一模式与其说关乎任何单一根本原因,不如说关乎一种将每次中断都视为孤立事件来处理的运营文化。两年后,同一机构在2018年5月的服务中断期间使澳大利亚的Triple Zero紧急呼叫服务失效,政府调查发现Telstra的事件处理程序“不够详尽,此前也未在所需规模上进行过测试”。
代价是什么
移动网络额外投入5000万澳元,随后是2.5亿澳元的资本支出转投;25澳元补偿;高管失去部分奖金;流失风险估计在11%至19%之间。
为什么会发生
每次中断都有不同的直接原因——人为失误、电缆故障、软件升级——但共同点是变更管理和测试滞后于网络的规模。
Telstra将自己定位为可靠性高端品牌,这意味着每一次故障都恰好击中了客户额外付费所换取的承诺。
在5月的中断期间,Telstra两次宣布网络已修复,而客户仍处于断网状态,将工程问题变成了信任问题。
网络投资是被动反应式的:5000万澳元和2.5亿澳元的计划是在故障之后而非之前宣布的。
只有在流失风险变得可量化之后,才出现了道歉和奖金削减——德意志银行将移动用户流失风险定为高达19%。
教训
可靠性取决于变更管理。一个脚本、一条电缆、一份配置——单独看都微不足道——当运营无法跟上营销的步伐时,便会叠加放大。
后续
Telstra 2016年的断网事件成为可靠性故障导致品牌受损的案例研究,专家对ABC表示,其处理方式“严重损害”了品牌。Penn的2.5亿澳元网络计划得以推进,高管因未达服务目标而接受了奖金削减。这一教训并未完全被吸取:2018年5月,Telstra是Triple Zero中断事件核心的紧急呼叫运营商,政府调查发现其事件处理程序不够详尽,也未针对如此规模的中断进行过充分测试,警报未能发出早期预警。随后提出了九项建议。
从这里,追溯依据
参考来源
- Telstra outage: Company apologises for internet service disruption with $25 credit ABC News · abc.net.au ·
- Telstra outages now a real problem for the company Sydney Morning Herald · smh.com.au ·
- Investigation report into the Triple Zero service disruptions of 4 & 26 May 2018 Department of Communications and the Arts (Australian Government) · infrastructure.gov.au