13.2 yöllä palvelin cloud1:n käyttöjärjestelmä korruptoitui ohjelmistovirheen takia. Saman virheen takia emme pystyneet palauttaa viimeistä palvelinkohtaista kopiota samalta illalta.

Jouduimme palauttamaan varmuuskopiot 12.3 aamulla otetuista tilikohtaisista varmuuskopioista. Tämä on valitettavasti huomaasti hitaampi tapa kuin palvelin kohtaiset varmuuskopiot. Kaikki tilit saatiin siirrettyä uudelle palvelimelle tiistain aikana.

Toimenpiteet

Käytössämme on luotettava pilviklusteri, jossa kaikki osat ovat fyysisesti vähintään kahdennettuja. Valitettavasti kahdennus suojaa vain fyysisiltä ongelmilta.

Virheen aiheutunut bugi on jo paikallistettu ja ohjelmiston valmistaja on luvannut ettei vastaava voi jatkossa tapahtua uudestaan. Tämän lisäksi tulemme kasvattamaan päivittäin otettujen palvelin kohtaisten varmuuskopioiden määrää sekä testaamaan näiden toimivuuden säännöllisin väliajoin.