Eine scheiss Woche!
Was für eine scheiss Woche liegt hinter mir! An allen Fronten Probleme! Es ging mit einer vollen DB unseres RT’s los. Damit wir damit nicht gegen die Wand laufen, haben wir das Ding ins SAN, genauer ins NAS gepackt und per NFS gemountet. Von hier an nahm das Unheil seinen Lauf! Als am Montag dann Last auf das System kam, gingen mitmal INSERTS in die DB nicht mehr, dauerten ewig lange und blockierten die komplette DB. Ein Neustart des Servers funktionierte nur – sagen wir mal: leidlich – und am Dienstag kackte die Kiste dann ganz ab. Also Umzug auf den Slave und Master neu machen.
Hier war dann erstmal Ende für mich, da mich eine Minigrippe heimsuchte und mich erstmal für 2 Tage ausschaltete, was aber die Probleme auf der DB (Backup) auch nicht löste – das Gute daran: Niemand kann mehr behaupten ich sei Schuld bei schlechter RT Performance, denn ich war nicht im Office..!
Daheim schlug mir auch gleich das nächste Problem entgegen: Mein Heimserver meinte, seine Lizenz sei nicht gültig – recht hat er, es war eine 30 Tage Trial Version, die allerdings erst seit 5 Tagen lief – die Bestellung der richtigen Lizenz war schon unterwegs! Aber wer glaubt, dass man aus einer Microschrott Home Server Trial mit Eingabe eines Lizenzkeys eine Vollversion machen kann, der hat die Rechnung ohne den Wirt, sprich M$ gemacht – eine Neuinstallation stand an (und wird hoffentlich in diesen Minuten bald fertig sein).
Wieder im Office konnten die Kollegen die Problemquelle auch schon eingrenzen und wir konnten uns heute Abend frisch ans Werk machen die Probleme zu fixen, dazu nur soviel: MySQL, NFS, SUN und Netapp in Verbindung sind eine Herausforderung, die Details dazu kommen in ein paar Tagen in meinem Wiki.
Aktueller Status: Wir haben wieder eine performante DB auf dem Backup System, immer noch kein neuen Slave aber dafür ein konsistentes Backup auf dem Filer, hier gehts dann ab Montag weiter.
Nächste Baustelle: Backup vom Filer auf das Prod System einspielen, dann davon einen richtigen DUMP machen, diesen dann erneut mit innodb-file-per-table einspielen und die verlorenen Tage nach synchen. Dann das neu aufgesetzte System als Master machen und den Slave neu aufsetzen, es bleibt also spannend.
Desweiteren warten wir händeringend auf eine Erweiterung die BPS für uns programmiert, die dann unsere Attachments aus der DB entfernt und im FS ablegt, dann haben wir wieder eine kleine DB, naja fast: Dann kommt das Spiel mit DUMP und neu Import nochmal, da InnoDB leider vergebenen Platz nicht wieder frei gibt!
Categorie: Linux, RT, Tags: MySQL, NetAPP, NFS, SUN
Updated at December 11, 2009 by admin, write at December 11, 2009 by admin | Log in