Wir hoffen, gegen 13 Uhr wieder da zu sein.

Entschuldigt bitte die Umstände.

BTW, wir haben auch einen Twitter-Account: @rennradnews

Update, 12:55 Uhr: Wir werden es nicht schaffen, um 13 Uhr wieder online zu sein. Der letzte Server hängt noch im Filesystemcheck und ist der Meinung, dass er gern noch etwas Zeit dafür hätte :-(

Update 13:55 Uhr: Alles wieder ok :-)

Ein Parameter, den wir auch so überwachen ist die Anzahl der User, welche zu einem Zeitpunkt bei MTB-News.de aktiv sind. In diesem Diagramm kann man manchmal echt nette Sachen sehen, zum Beispiel den Verlauf eines Länderspiels der deutschen Mannschaft bei der vergangenen Europameisterschaft.

Heiligabend ist auch so ein besonderer Tag:

Man sieht wunderbar, wie die Userzahl am späten Nachmittag förmlich wegbricht (weil die Leute sich ihre Geschenke geben lassen nehme ich an…) und sich erst am späten Abend noch mal ein wenig “erholt”. Man sieht den Unterschied zu den vergangenen Tagen sehr deutlich, wenn man sich das Diagramm der gesamten letzten Woche anschaut – der Knick am Nachmittag ist an keinem anderen Tag außer Heiligabend existent:

So, und nun feiert schön weiter :)

Die vorherigen Server haben gut anderthalb Jahre ihren Dienst getan, arbeiteten zuletzt aber immer öfter an ihren Leistungsgrenzen.

Die Teile von MTB-News.de, welche wir jetzt von neuen Maschinen ausliefern lassen, liefen zuvor auf vier Servern (drei Webserver, ein Datenbankserver – naja, eigentlich waren es fünf – es gibt immer noch einen Datenbank-Slave-Server). Es handelte sich um Maschinen mit Athlon 64 X2 Dual-Core-Prozessoren mit jeweils acht Gigabyte RAM und zwei zu einem RAID 1 konfigurierten SATA-II-Platten.

Es verhielt sich zuletzt so, dass die Webserver an den CPU-Limits arbeiteten und der Master-Datenbankserver am Limit der Festplatten (ihm fehlte etwas RAM, was eine erhöhte Festplattenaktivität zur Folge hatte). Viel Spielraum für Optimierungen am Software-Setup hatten wir auch nicht mehr, so dass wir den Entschluss fassten, alles auf aktuellere Hardware umzuziehen.

Wir haben die neuen Server so ausgewählt, dass sie an den jeweilige Problemstellen der alten Maschinen merkliche Verbesserungen erhielten. Als Webserver haben wir nun anstatt drei Maschinen mit jeweils zwei CPU-Cores zwei Maschinen mit jeweils acht Cores (aktuelle Xeon-Prozessoren). Der Datenbankserver hat jetzt zum Einen doppelt so viel RAM (16 Gigabyte) und zum Anderen ein RAID 5 aus drei SAS-Festplatten mit 15.000 U/min und schafft merklich mehr I/O-Operationen pro Sekunde. Die Benchmarks, die wir vorab gefahren haben, versprachen einen anständigen Leistungsschub für MTB-News.de. Nach dem Umzug haben wir es auch von einigen Leuten gehört (und natürlich auch selbst bemerkt …), dass das Forum nun merklich schneller läuft als vorher.

Den Umzug auf neue Hardware am Freitag haben wir gleich genutzt, um dem Softwarestack der Server einigen Änderungen zu unterziehen. Seit Beginn haben wir bei MTB-News.de auf den Apache-Webserver mit mod_php gesetzt. Diese Konstellation hat allerdings einige Nachteile, insbesondere auf Seiten mit viel Last.

Wir haben den Apache auf den neuen Servern jetzt gar nicht mehr installiert, sondern setzen auf nginx – einem kleinen, gut konfigurierbaren und doch sehr effizienten und schnellen Webserver. PHP ist über die FastCGI-Schnittstelle angebunden.

Den MySQL-Datenbankserver haben wir bei der Gelegenheit auch gleich von Version 5.0 auf Version 5.1 migriert – auch hier bieten sich einige Vorteile gegenüber der Vorgängerversion.

Viele Teile von MTB-News.de (Fotoalbum, Videos, Trainingsverwaltung, Tourguide, Winterpokal, you name it …) laufen unabhängig vom Forum auf ganz anderen Servern und wurden beim Serverumzug gar nicht angefasst. Insgesamt gibt es zur Zeit sieben Maschinen, welche für die Auslieferung der Seiten von MTB-News.de zuständig sind.

Soweit mal ein paar technische Einblicke hinter die Kulissen. Wenn sich Fragen auftun – die Kommentare sind offen :)

Wir hoffen, dass wir mit der aktuellen Hardware gut über die nächste Saison kommen – mal schauen, wann das nächste Upgrade fällig wird.

@20:11 Das Forum haben wir gerade dicht gemacht und legen jetzt los
@20:30 Der Hinweis auf den Videobereich wurde wohl vermehrt angenommen – grade sind dort 200 Benutzer unterwegs
@20:31 Datenbanken werden auf den neuen Server kopiert
@20:36 Datenbanken werden importiert – nachdem das geschehen ist (dauert so ca. eine Stunde) wollen wir noch ein paar Änderungen an den Indexen der Datenbank vornehmen, das dauert auch noch mal eine knappe Stunde. Danach sollten wir langsam auf den neuen Server umschalten können
@21:10 Die Datenbanken sind auf dem neuen Server importiert. Jetzt führen wir ein paar Änderungen an Tabellen-Indexen durch …
@21:50 jetzt testen, ob alles geht
@22:10 Wir sind wieder da :) scheint alles geklappt zu haben. Jetzt noch kleinere Probleme beheben

Freitag abend (11. Dezember 2009) wird daher zwischen ca. 20 und 24 Uhr News, Forum und Bikemarkt gar nicht oder nur eingeschränkt zu erreichen sein.

Foto- und Videoalben, Tourguide, Trainingsverwaltung und Winterpokal sind während dieser Zeit bis auf kurze Pausen aber normal abrufbar.

Wir werden euch hier im Blog und auf Twitter @mtbnews auf dem Laufenden halten.

Bikemarkt, Fotos, Videos und Winterpokal laufen unabhängig davon ohne Störung.

Sobald es Neues gibt erfahrt ihr es hier.

Update 12:15
Es lag an einem defekten CPU Lüfter – dieser wurde ausgetauscht, jetzt sollte alles wieder laufen – das ganze hat dann zum Glück doch nur eine Stunde gedauert

Update, 21:30 Uhr: Fehler ist lokalisiert, wir warten jetzt auf den Tausch des defekten Teils (Netzwerkkarte).

Wir haben in diesem Jahr die Auslieferung der Videos komplett selbst übernehmen können – 2008 hatten wir zum Teil noch auf Amazons S3 zurück gegriffen.

Als am Abend des 2. September das erste Video hochgeladen und im News-Bereich verlinkt wurde, verhielt sich alles noch recht ruhig – richtig los ging es dann am 3. September. Im Laufe dieses Tages wurden die ersten 15 Videos insgesamt fast 16.000 mal angeschaut. Am 4. September hatten wir insgesamt schon 27 Videos veröffentlicht, an diesem Tag wurden die Videos 24.500 mal angeschaut – was auch der Tagesrekord war.

Verlauf der Downloads

Die durchschnittliche Dateigröße eines Videos ist gut 37 Megabyte – am 4. September haben wir also allein ca. 850 Gigabyte an Videos ausgeliefert.

Bis zum 28. September 2009 wurden alle 50 Videos insgesamt 193.000 mal angeschaut, das entspricht einer übertragenen Datenmenge von ungefähr 7,5 Terabyte (oder ca. 400 Tage Video am Stück).

Wir haben in Spitzenzeiten drei Server zur Auslieferung benutzt, jeder hatte 100 MBit/s Bandbreite zur Verfügung. Diese 100 MBit/s pro Server wurden gerade zum Anfang tagsüber permanent fast komplett ausgelastet. Wir hatten noch Backup-Bandbreite in Reserve (wieder bei S3), brauchten diese aber nicht in Anspruch nehmen. Es gab auch keine Beschwerden über zu langsame Übertragungen – wir denken also, dass wir das ganz gut hinbekommen haben ;)

Verlauf der Bandbreitennutzung eines Video-Servers

Rekordhalter bei den Downloads ist übrigens das Canyon-Video, welches bis jetzt fast 11.000 mal angeschaut wurde. Auf den Plätzen zwei und drei folgen Cannondale und Liteville.

Die Top-Ten der Downloads:

1. Canyon
2. Cannondale
3. Liteville & Syntace
4. Trek
5. Shimano
6. Specialized
7. DT Swiss
8. Nicolai
9. SRAM
10. Votec

Es geht um einen zweiwöchigen Zeitraum im August, in dem ich gerne möglichst Zugang per UMTS/EDGE, notfalls auch GPRS brauche. SIM-Karte reicht, wenn es sich lohnt kaufe ich aber auch gerne einen USB-UMTS-Stick dazu.

Danke!

jode tach IBC admin freaky`s, esx 8.0 voll fett da mein seins, ever euer “ist dir not erlaubt, du nix darfst her” it very dünn scho fast dünnbrettbohrer mäßig,us diesem grunde trett i nix bei in euren admin verein!!!!
p.s.: inne rubik klapprad wäred ihr uch jod ufjehove, weil: da steht irgentwo on the screw: du nix drehen her, du nix dürfen drive dabei!!!
da bleib i lever im tal
also nix for ungood un ein lutscher mäh mäh mäßiges dawai

sonnigst

Hm – was soll ich da antworten – mir fällt wirklich nichts dazu ein.

Der Unterschied der Anklickrate zwischen beiden Bannern ist signifikant – was denkst du – welcher Banner wird häufiger angeklickt (mit Begründung)?

Banner 1:

Banner 2:

Die Auflösung dazu gibt es Ende der Woche

(Linkziel des Banners)

Forum ist wieder offen

• 20:07 Forum ist geschlossen – wir beginnen
• 20:40 Forum ist aktualisiert, letzte Anpassungen
• 21:03 Forum ist wieder da

Info vom Hoster:
Derzeit liegt eine Störung in unserer Stromversorgung vor. Unsere Techniker arbeiten mit Hochdruck an der Ursachenanalyse und der Behebung des Problems.

Wir hoffen, dass bald alles wieder geht und halten euch hier auf dem Laufenden.

Update 11:40: Server haben wieder Strom und werden hochgefahren

Update 12:00: Schätzungsweise gegen 13:00 sollte alles wieder normal laufen

Update 13:52: das ganze zieht sich etwas hin – da die Server nicht sauber runtergefahren wurden müssen sich RAID und andere Dinge erstmal initialisieren – unser aktueller Tipp ist daher ca 17:00 Uhr heute.

Info vom Hoster:

29.01.2009 13:31 Uhr
Aufgrund der vielzahl an ausgefallenen Servern, bitten wir um Verständniss, dass die Wiederherstellung von defekten Servern im Einzelfall noch den ganzen Tag über dauern kann. Die Rechenzentren beherbergen ca. 12.000 Server. Die meisten Systeme sind nach Rückkehr der Spannungsversorgung wieder verfügbar. Im Augenblick muss mit mehreren Stunden Bearbeitungszeit gerechnet werden

30.01.2009, 6:36 Uhr: Fotoalbum ist wieder da. Alles wieder im gruenen Bereich :) Danke fuer eure Geduld!

Hinweis

Wir geben zwischendurch auch Updates über Twitter heraus: twitter.com/mtbnews