peterle
Forenkasper
Ich darf/muß mal mit meinem Board umziehen. Nun sind da unter anderem 2.5 Millionen Beiträge, die gerne jeder einzeln angefasst werden wollen, um sie fein säuberlich in die neue DB einzusortieren, wobei dann am Schluß nochmal über alles drübergebügelt wird, damit auch alles schön konsistent ist.
Nun möchte ich kein Reenginierng machen und auch keine eigenen Hacks für eine Conversion schreiben, aber vielleicht aus dem Setup rauskitzeln, was rauszukitzeln ist.
Aktuell schafft er ca. 600 Beiträge pro Minute aus der DB zu saugen und einzusortieren - nach Überblick mit Stoppuhr.
Was sind denn hier die limitierenden Faktoren und wie kann ich die u.U. verbessern?
MySQL ist mit mysqltuner und tuning-primer auf ca. 8-9GB maximalen RAM ausgelegt und läuft damit sicher vor sich hin. Richtig ins Schwitzen komt er bei der Sache auch nicht.
Der Apache auf einem anderen Server läuft auf event mit php-fpm und beides zusammen müßte auch bis 8-9GB maximalen RAM ausgelegt sein. Ins Schwitzen kommt auch der nicht.
Ich nehme mal an, daß Knackpunkte noch in der internen Netzwerkgeschwindigkeit liegen könnten - wobei ich nicht weiß, wie ich das testen sollte. Dann in der Lese- und Schreibgeschwindigkeit der Platten. Mehr RAM, mehr CPU wird vermutlich nicht wirklich was bringen.
Übersehe ich was oder sonst welche Tipps?
Nun möchte ich kein Reenginierng machen und auch keine eigenen Hacks für eine Conversion schreiben, aber vielleicht aus dem Setup rauskitzeln, was rauszukitzeln ist.
Aktuell schafft er ca. 600 Beiträge pro Minute aus der DB zu saugen und einzusortieren - nach Überblick mit Stoppuhr.
Was sind denn hier die limitierenden Faktoren und wie kann ich die u.U. verbessern?
MySQL ist mit mysqltuner und tuning-primer auf ca. 8-9GB maximalen RAM ausgelegt und läuft damit sicher vor sich hin. Richtig ins Schwitzen komt er bei der Sache auch nicht.
Der Apache auf einem anderen Server läuft auf event mit php-fpm und beides zusammen müßte auch bis 8-9GB maximalen RAM ausgelegt sein. Ins Schwitzen kommt auch der nicht.
Ich nehme mal an, daß Knackpunkte noch in der internen Netzwerkgeschwindigkeit liegen könnten - wobei ich nicht weiß, wie ich das testen sollte. Dann in der Lese- und Schreibgeschwindigkeit der Platten. Mehr RAM, mehr CPU wird vermutlich nicht wirklich was bringen.
Übersehe ich was oder sonst welche Tipps?