Universidade japonesa perde 77 TB de dados de pesquisa após uma atualização de software com erros
Em resumo: a perda de dados devido a um erro de backup pode significar se preocupar com a perda de anos de fotos pessoais ou, como no caso da Universidade de Kyoto do Japão, perder 77 TB de dados críticos de pesquisa. O incidente ocorreu com o supercomputador da universidade que recebeu uma atualização de software defeituosa para seu sistema de backup, limpando acidentalmente 34 milhões de arquivos em um período de dois dias.
O culpado por essa enorme perda de dados foi um script defeituoso originalmente destinado a excluir arquivos de log antigos e desnecessários do supercomputador Cray/HPE da universidade de Kyoto como parte de uma atualização de software. No entanto, acabou excluindo enormes 77 TB de dados de pesquisa entre 14 e 16 de dezembro de 2021, do disco de backup /LARGE0 de alta capacidade do computador.
A universidade estimou inicialmente a perda de até 100 TB de dados após a atualização com erros ter apagado quase todos os arquivos com mais de 10 dias. Os 77 TB de dados de pesquisa que foram excluídos continham 34 milhões de arquivos que afetaram 14 grupos de pesquisa. Embora a Universidade de Kyoto não tenha revelado a natureza ou os detalhes dos dados de pesquisa apagados, observou (japonês) que os arquivos pertencentes a 4 grupos eram irrecuperáveis.
O fornecedor de supercomputadores da universidade, a Hewlett Packard Japan (HPE), admitiu 100% de responsabilidade pelo incidente e emitiu uma carta de desculpas publicada posteriormente pela universidade. A HPE disse que um script modificado foi emitido em sua atualização para "melhorar a visibilidade e a legibilidade", como relata o The Stack .
No entanto, a HPE disse que não estava ciente dos efeitos colaterais desse comportamento, o que fez com que o script de shell modificado fosse recarregado no meio da execução, resultando em "variáveis indefinidas" e exclusão de arquivos no disco de backup /LARGE0 do supercomputador.
Desde então, a Universidade de Kyoto suspendeu o processo de backup, pois procura fazer melhorias e adicionar medidas preventivas para lidar com esses incidentes no futuro. Além de backups espelhados, a universidade também planeja manter backups incrementais assim que retomar o programa de backup ainda este mês.