비팟의 냉각 시스템 고장으로 1억 위안 손실과 부사장 해임

2023년 3월 29일, 비팟의 전자상거래 플랫폼은 난사 IDC(인터넷 데이터센터)의 냉각 시스템 고장으로 서버실 온도가 급격히 상승하면서 장비가 연쇄적으로 셧다운되어 치명적인 서비스 중단을 겪었다. 중단은 12시간 이상 지속되었고 800만 명 이상의 고객에게 영향을 미쳤으며 회사에 1억 위안 이상의 직접 손실을 입혔다. 비팟은 이 사고를 P0(최고 심각도) 등급 장애로 분류했다.

회사의 대응은 신속하고 공개적이었다. 인프라 플랫폼 부서장은 해고되었고, 영향을 받은 팀의 직속 관리자들은 책임을 물었다. 이 사고는 같은 데이터센터에서 서비스를 호스팅하던 텐센트에도 영향을 미쳤으며, 텐센트는 내부적으로 이 사건을 '1급 사고'로 분류하여 여러 임원에 대한 비판, 강등, 해고를 초래했다. 이번 장애는 단일 데이터센터 아키텍처와 불충분한 재해 복구 계획의 위험을 드러냈다.

비팟은 페일오버 없이 단일 데이터센터에서 운영되었기 때문에, 냉각 시스템 고장 한 번으로 1억 위안 이상의 손실이 발생하고 부사장이 해임되었다.

비팟은 실시간 페일오버 없이 전체 플랫폼을 단일 데이터센터에서 운영했고, 한 방의 냉각 고장이 회사 전체를 마비시켰다

중단은 12시간 동안 지속되었으며, 이는 기본적인 재해 복구 절차조차 마련되지 않았거나 충분히 신속하게 가동될 수 없었음을 시사한다

단일 데이터센터는 단일 장애점이며, 냉각 고장은 돌발 사건이 아니라 모든 플랫폼이 견뎌야 할 예측 가능한 위험이다