Výpadek MySQL serveru

Omlouváme se všem našim uživatelům za dnešní několikahodinový výpadek. Příčinou je hlavni MySQL server, který přestal v cca 6:33 odpovídat. Okamžitě se začalo pracovat na diagnóze problému. Na serveru jsou 4 SAS disky v raid10. Bohužel v jednu chvíli došlo k současnému výpadku dvou z těchto 4 disků. V tu chvíli se raid pole rozpadlo. Je dost malá pravděpodobnost, že by nastala chyba u dvou disků zároveň a tak se spíše jedná o chybu firmwaru. Ihned se začalo s obnovou databází na náhradní server. Bohužel se dohromady jedná o velký počet dat - cca 70.000 databazí.
Synchronně se řešilo, zda obnovit data ze zálohy a tim riskovat, že uživatelé o některá data přijdou, nebo se snažit obnovit rozpadlé pole s tim, že některá data budou nekonzistentní.

Během dopoledne se povedlo většinu databazí provizorně spustit. Bohužel daná data byla nekonzistentní a nešlo je dlouhodobě použit. Po poledni se povedlo získat konzistentní data z rána a z těch nyní všechny databáze běží. Z toho však plyne, že veškeré změny, které byly na databazích provedené během dnešního dopoledne, jsou ztraceny. Za toto se velmi omlouváme.

Pokud máte program Plus nebo Mega a dotkl se vás tento výpadek, napište na info@endora.cz a jako omluvu vám rádi webhosting o 14 dní prodloužíme.