Uma atualização de software de fornecedor derrubou a rede da Norfolk Southern por semanas

O Supply Chain Dive informou em 1º de setembro de 2023 que a Norfolk Southern esperava precisar de semanas para recuperar seu acúmulo de trens após uma interrupção de serviço que paralisou as operações no início daquela semana. A ferrovia confirmou que a interrupção não foi um incidente de segurança cibernética, mas um erro no software do fornecedor.

"Durante um procedimento de manutenção de rotina realizado por nosso fornecedor, um defeito no software dele criou um erro que fez com que tanto nossos sistemas de armazenamento de dados primário quanto os de recuperação ficassem inoperantes", disse a ferrovia em comunicado, acrescentando que isso, por sua vez, afetou seus sistemas operacionais centrais.

Os sistemas foram restaurados e o serviço foi retomado na noite de segunda-feira, com a Norfolk Southern trabalhando para escoar o acúmulo e esperando recuperar totalmente sua rede nas semanas seguintes. A ferrovia disse que estava trabalhando em estreita colaboração com o fornecedor em medidas para evitar recorrência e para identificar oportunidades de tornar a Norfolk Southern mais resiliente.

Os sistemas operacionais centrais pararam; o serviço foi interrompido e só retomado na noite de segunda-feira, com a ferrovia afirmando que a recuperação total do acúmulo poderia levar semanas.

O armazenamento primário e o de recuperação compartilhavam o mesmo modo de falha.

A manutenção de rotina tinha acesso de escrita profundo o suficiente para corromper ambos.

O despacho de uma ferrovia depende de sistemas operacionais centrais que não podem ficar parados.

O acúmulo em uma rede ferroviária se agrava: os trens se recuperam mais lentamente do que os sistemas.

Um sistema de recuperação que pode ser derrubado pelo mesmo defeito que o primário não é redundância — o acesso de manutenção precisa do mesmo isolamento que a produção.

A ferrovia disse que estava trabalhando com o fornecedor para fortalecer os sistemas e identificar melhorias de resiliência; nenhum impacto financeiro foi quantificado no comunicado.