Serverprobleme der letzten Tage

[Bernd Glasstetter]

Nach einem Stromausfall am Montag den 9.10. haben wir derzeit recht massive Serverprobleme, die sich vor allem darin zeigen, dass beim Backup, das gegen 3 Uhr morgens anläuft, regelmässig der MySQL-Server (der verwaltet die Datenbanken) sich aufhängt. Dadurch werden auch immer wieder Tabellen in den Datenbanken in Mitleidenschaft gezogen.

Heute morgen war das dann so massiv, dass wir einige Massnahmen getroffen haben, um die Stabilität des Servers wieder herzustellen. Wir sind dabei darauf gestossen, dass ein MySQL-Prozess offenbar seit dem Restart am Montag im Hintergrund fest hing. Das könnte die Probleme verursacht haben, die wir seitdem hatten.

Wir denken derzeit auch darüber nach bei unserem Provider wegen Schadenersatz anzuklopfen, denn das kostet inzwischen jeden Tag sehr viel Zeit und der Server lief vor dem Stromausfall klaglos - wenn auch inzwischen etwas träge. Das wird aber auch noch behoben. Anfang November werden wir den Server komplett austauschen, auf eine schnellere Maschine umsteigen. Die Planungen dafür laufen schon eine ganze Weile. das ist leider auch nicht sehr trivial, denn wir müssen ja nicht nur die Sites umziehen lassen, wir müssen auch eine gewisse Ausfallzeit mit einplanen. Da derzeit auch eine größere Werbekampagne auf Splashcomics und dem Comicforum läuft, können wir das auch nicht jetzt machen.

[kevin smith]

wie lang würde denn der umzug dauern? ihr werdet ja nicht erst den alten server abschalten und dann den neuen starten. für die user dürfte das also kein dauerhafter spürbarer zustand sein.

auf jeden fall viel erfolg bei der aktion. falls ich helfen kann ... du hast ja meine nummer.

[Easton]

ich würd ja auch helfen aber, 800 km sind mir ein bisschen zu viel :-D

[Bernd Glasstetter]

Der eigentliche Umzug wird einen Tag dauern. Davor muss der neue Server erst einmal bereit stehen und unter zum Beispiel www2.comicforum.de warten. Da wir gleichzeitig alle Splash-Seiten mitumziehen müssen, ist die Vorbereitung das Aufwändigste. Wir müssen erst einmal alle Dienste installieren. Das geht theoretisch auch an einem Tag. Aber es muss auch alles getestet werden.

Das Comicforum wird dann abgeschaltet und zwar auf dem alten Server. Dann wird die Datenbank kopiert. Und auf dem neuen Server wird es angeschaltet. Danach wird der DNS-Eintrag umgebogen, was für einzelne Nutzer bis zu 24 Stunden dauern kann.

Als Vorbereitung werden wir aber erst einmal noch ein paar Kundenpräsenzen - es sind nur zwei oder drei - von diesem Server auf einen anderen Server umziehen, den wir schon länger haben. Damit wirklich nur noch das Netzwerk übrig bleibt.

[captainslater]

Aktualisiert ihr auch dann gleich das Board (das Template anpassen könnte mühsam werden)?

[Bernd Glasstetter]

Das Update des Boards werden wir erst danach machen. Denn dafür brauchen wir eine aktuellere PHP-Version, als die, die wir derzeit am Laufen haben. Das wird dann erst mit dem neuen Server der Fall sein. Aber da werden wir uns sicher wieder genügend Testzeit nehmen, bevor wir das Update vollziehen.

[captainslater]

Das Update des Boards werden wir erst danach machen. Denn dafür brauchen wir eine aktuellere PHP-Version, als die, die wir derzeit am Laufen haben. Das wird dann erst mit dem neuen Server der Fall sein. Aber da werden wir uns sicher wieder genügend Testzeit nehmen, bevor wir das Update vollziehen.

Dann wünsche ich viel Erfolg mit der Aktion

[Bernd Glasstetter]

Noch ein paar Informationen zum Server, den wir uns da holen werden. Der sieht so aus:
AMD Athlon 64 3700+
2 GB DDR400 RAM
2 x 300 GB SATA HDD
ist also eine heiße Kiste. Vorteil der 2 Festplatten: Sie bieten Ausfallsicherheit und eine ungleich höhere Performance. Webdaten werden auf der 1. Festplatte, Datenbankdaten auf der 2. Festplatte gelagert. Ob wir die Datenbanken dabei spiegeln, ist noch nicht entschieden.

Bisher hatten wir einen AMD Athlon 3000+ und ebenfalls 2 GB RAM. Wir überlegen auch, ob wir eventuell gleich 4 GB RAM einsetzen lassen. Das ist noch nicht entschieden.

[Bernd Glasstetter]

Wir sind den Problemen wohl auf die Spur gekommmen. Es sieht so aus, als hätte der Stromausfall das Backup vom Montag aus dem Takt gebracht. Statt wie geplant ein altes Backup am Schluss zu löschen, wurde das nicht getan und die Festplatte lief voll. Da diese Prozesse üblicherweise gegen 7:30 Uhr fertig sind und just da der Stromausfall war...

Ein Backup umfasst immerhin 21 GB an Daten, größter Faktor sind die Splashpages. Wir haben dort ja zum Beispiel die Filme der Messeberichterstattungen liegen. Da kommt einiges zusammen. Wir heben üblicherweise die Backups der letzten 2 Tage auf, überspielen jeden Morgen den wichtigsten Teil, der sich am Häufigsten ändert (also Datenbanken und das Splashpages-Verzeichnis) auf einen anderen Server. Einmal in der Woche wird das komplette Backup übertragen.

Wir haben mit einer 150 GB-Festplatte keinen kleinen Datenträger im Server drin. Aber auch der hat eben seine Grenzen. Die Situation ist damit erst einmal wieder unter Kontrolle und wird dann mit dem neuen Server (2 * 300 GB Festplatte) erheblich entschärft.

Hinzu kommt noch, dass wir doch noch ein paar Dateileichen auf dem Server hatten. So waren noch alle Mailverzeichnisse vorhanden, obwohl wir den Mailserver bereits vor einigen Monaten ausgelagert haben. Ich räume derzeit die Festplatte etwas auf...