01/10/2014
Liebe User von AnPa.de Freemail,
nach einen Komplett-Ausfall sind wir nun nach mehreren Tagen wieder zu erreichen!
Aktuell werden ca. 50.000 E-Mails zugestellt, die sich in der Warteschlange befinden. Wir gehen davon aus, das diese in den nächsten Stunden zugestellt werden.
Doch was war passiert?
Wir betreiben einen Server mit einer Virtualisierungs-Software und einem Hardware-RAID. Das Dateisystem des Virtualisierungs-Host zeigte fortgehend einen Fehler im Dateisystem, vergleichbar mit defekten Sektoren einer Festplatte. Wir führten daher mehrere Reparaturen des Dateisystems durch, leider nur mit mäßigem Erfolg - nach 2-3 Stunden trat der Fehler erneut auf. Nach weiteren Analysen stellten wir fest, das ein Fehler im RAID-Stripe aufgetreten war. Woher dieser Fehler kommt, können wir uns nicht erklären - so wählten wir doch ein RAID um solche Fehler zu verhindern? Wie dem so sei war eine Reparatur nicht möglich - wir waren gezwungen den gesamten Server neu aufzusetzen.
Wir haben die virtuellen Maschinen (AnPa.de ist eine eigene, virtuelle Maschine, die MySQL-Datenbank ist eine weitere virtuelle Maschine) gesichert und auf ein Storage-System geschoben. Die Geschwindigkeit des Kopierens war leider nicht die Beste - klar, wir sind nicht die einzigen, die diesen Storage nutzen.
Insgesamt kopierten wir ca. 2,5 Terrabyte (2500 Gigabyte) Daten über eine Netzwerkverbindung auf einen Netzwerkspeicher, installierten das System neu, und reaktivierten die virtuellen Maschinen über den Netzwerkspeicher wieder auf den Server.
Nachdem wir dieses erfolgreich abgeschlossen haben, stehen wir nun wieder zur Verfügung und hoffen, das die Probleme damit behoben sind!
Wir bedauern die Umstände, die Ihnen dadurch entstanden sind, leider war eine schnellere Lösung mit unseren Mitteln nicht realisierbar.
Viele Grüße aus Stockelsdorf
Angelo Pacelli
AnPa.de Freemail
