Archive for the 'MTB-News.de' Category

Heiligabend bei MTB-News.de

25. Dezember 2009 in MTB-News.de and Technik. 3 Comments

Für den reibungslosen Betrieb von Seiten wie MTB-News.de ist es wichtig, dass man die Server und Dienste permanent überwacht und bei Auffälligkeiten schnell reagieren kann. Es gibt verschiedene Arten, Server und Dienste zu überwachen: zum einen es ist z. B. möglich, in regelmäßigen Zeitabständen zu prüfen, ob der Server per Netzwerk erreichbar ist (ping) oder ob der Webserver noch arbeitet. Eine andere Art der Überwachung ist das langfristige Aufzeichnen bestimmer Parameter, etwa der CPU-Auslastung. So kann man in einem Diagramm sehen, wie sehr ein Server über den Tag verteilt zu tun hat. Man kann sich das auch über längere Zeiträume ansehen, etwas über ein ganzes Jahr.

Ein Parameter, den wir auch so überwachen ist die Anzahl der User, welche zu einem Zeitpunkt bei MTB-News.de aktiv sind. In diesem Diagramm kann man manchmal echt nette Sachen sehen, zum Beispiel den Verlauf eines Länderspiels der deutschen Mannschaft bei der vergangenen Europameisterschaft.

Heiligabend ist auch so ein besonderer Tag:

Man sieht wunderbar, wie die Userzahl am späten Nachmittag förmlich wegbricht (weil die Leute sich ihre Geschenke geben lassen nehme ich an…) und sich erst am späten Abend noch mal ein wenig “erholt”. Man sieht den Unterschied zu den vergangenen Tagen sehr deutlich, wenn man sich das Diagramm der gesamten letzten Woche anschaut – der Knick am Nachmittag ist an keinem anderen Tag außer Heiligabend existent:

So, und nun feiert schön weiter :)

Nach dem Serverumzug

13. Dezember 2009 in Forum, MTB-News.de and Technik. 12 Comments Tags: , , .

Am Freitag war es – mal wieder – soweit: wir haben einen Teil von MTB-News.de (News, Forum, Bikemarkt und ein paar kleinere Sachen) auf neue Server umgezogen.

Die vorherigen Server haben gut anderthalb Jahre ihren Dienst getan, arbeiteten zuletzt aber immer öfter an ihren Leistungsgrenzen.

Die Teile von MTB-News.de, welche wir jetzt von neuen Maschinen ausliefern lassen, liefen zuvor auf vier Servern (drei Webserver, ein Datenbankserver – naja, eigentlich waren es fünf – es gibt immer noch einen Datenbank-Slave-Server). Es handelte sich um Maschinen mit Athlon 64 X2 Dual-Core-Prozessoren mit jeweils acht Gigabyte RAM und zwei zu einem RAID 1 konfigurierten SATA-II-Platten.

Es verhielt sich zuletzt so, dass die Webserver an den CPU-Limits arbeiteten und der Master-Datenbankserver am Limit der Festplatten (ihm fehlte etwas RAM, was eine erhöhte Festplattenaktivität zur Folge hatte). Viel Spielraum für Optimierungen am Software-Setup hatten wir auch nicht mehr, so dass wir den Entschluss fassten, alles auf aktuellere Hardware umzuziehen.

Wir haben die neuen Server so ausgewählt, dass sie an den jeweilige Problemstellen der alten Maschinen merkliche Verbesserungen erhielten. Als Webserver haben wir nun anstatt drei Maschinen mit jeweils zwei CPU-Cores zwei Maschinen mit jeweils acht Cores (aktuelle Xeon-Prozessoren). Der Datenbankserver hat jetzt zum Einen doppelt so viel RAM (16 Gigabyte) und zum Anderen ein RAID 5 aus drei SAS-Festplatten mit 15.000 U/min und schafft merklich mehr I/O-Operationen pro Sekunde. Die Benchmarks, die wir vorab gefahren haben, versprachen einen anständigen Leistungsschub für MTB-News.de. Nach dem Umzug haben wir es auch von einigen Leuten gehört (und natürlich auch selbst bemerkt …), dass das Forum nun merklich schneller läuft als vorher.

Den Umzug auf neue Hardware am Freitag haben wir gleich genutzt, um dem Softwarestack der Server einigen Änderungen zu unterziehen. Seit Beginn haben wir bei MTB-News.de auf den Apache-Webserver mit mod_php gesetzt. Diese Konstellation hat allerdings einige Nachteile, insbesondere auf Seiten mit viel Last.

Wir haben den Apache auf den neuen Servern jetzt gar nicht mehr installiert, sondern setzen auf nginx – einem kleinen, gut konfigurierbaren und doch sehr effizienten und schnellen Webserver. PHP ist über die FastCGI-Schnittstelle angebunden.

Den MySQL-Datenbankserver haben wir bei der Gelegenheit auch gleich von Version 5.0 auf Version 5.1 migriert – auch hier bieten sich einige Vorteile gegenüber der Vorgängerversion.

Viele Teile von MTB-News.de (Fotoalbum, Videos, Trainingsverwaltung, Tourguide, Winterpokal, you name it …) laufen unabhängig vom Forum auf ganz anderen Servern und wurden beim Serverumzug gar nicht angefasst. Insgesamt gibt es zur Zeit sieben Maschinen, welche für die Auslieferung der Seiten von MTB-News.de zuständig sind.

Soweit mal ein paar technische Einblicke hinter die Kulissen. Wenn sich Fragen auftun – die Kommentare sind offen :)

Wir hoffen, dass wir mit der aktuellen Hardware gut über die nächste Saison kommen – mal schauen, wann das nächste Upgrade fällig wird.

Eurobike-Videos, ein Rückblick

29. September 2009 in MTB-News.de and Technik. 0 Comments

Nun sind seit der Eurobike ein paar Wochen vergangen. Zeit für uns, euch mit ein paar Hintergrundinformationen zu unserem Videoangebot zur Messe zu versorgen.

Wir haben in diesem Jahr die Auslieferung der Videos komplett selbst übernehmen können – 2008 hatten wir zum Teil noch auf Amazons S3 zurück gegriffen.

Als am Abend des 2. September das erste Video hochgeladen und im News-Bereich verlinkt wurde, verhielt sich alles noch recht ruhig – richtig los ging es dann am 3. September. Im Laufe dieses Tages wurden die ersten 15 Videos insgesamt fast 16.000 mal angeschaut. Am 4. September hatten wir insgesamt schon 27 Videos veröffentlicht, an diesem Tag wurden die Videos 24.500 mal angeschaut – was auch der Tagesrekord war.

Verlauf der Downloads

Verlauf der Downloads

Die durchschnittliche Dateigröße eines Videos ist gut 37 Megabyte – am 4. September haben wir also allein ca. 850 Gigabyte an Videos ausgeliefert.

Bis zum 28. September 2009 wurden alle 50 Videos insgesamt 193.000 mal angeschaut, das entspricht einer übertragenen Datenmenge von ungefähr 7,5 Terabyte (oder ca. 400 Tage Video am Stück).

Wir haben in Spitzenzeiten drei Server zur Auslieferung benutzt, jeder hatte 100 MBit/s Bandbreite zur Verfügung. Diese 100 MBit/s pro Server wurden gerade zum Anfang tagsüber permanent fast komplett ausgelastet. Wir hatten noch Backup-Bandbreite in Reserve (wieder bei S3), brauchten diese aber nicht in Anspruch nehmen. Es gab auch keine Beschwerden über zu langsame Übertragungen – wir denken also, dass wir das ganz gut hinbekommen haben ;)

Verlauf der Bandbreite eines Video-Servers

Verlauf der Bandbreitennutzung eines Video-Servers

Rekordhalter bei den Downloads ist übrigens das Canyon-Video, welches bis jetzt fast 11.000 mal angeschaut wurde. Auf den Plätzen zwei und drei folgen Cannondale und Liteville.

Die Top-Ten der Downloads:

  1. Canyon
  2. Cannondale
  3. Liteville & Syntace
  4. Trek
  5. Shimano
  6. Specialized
  7. DT Swiss
  8. Nicolai
  9. SRAM
  10. Votec

Welcher Banner wird häufiger angeklickt?

16. Februar 2009 in Diverses and MTB-News.de. 17 Comments

Der Braunschweiger Bikestation BS Bikeshop bewirbt derzeit bei uns seine “10% Rabatt auf alles” Kunden / Treuekarte. Wir lassen derzeit zwei sehr ähnliche Banner parallel laufen.

Der Unterschied der Anklickrate zwischen beiden Bannern ist signifikant – was denkst du – welcher Banner wird häufiger angeklickt (mit Begründung)?

Banner 1:
datei_1234513937

Banner 2:
datei_1234523561

Die Auflösung dazu gibt es Ende der Woche

(Linkziel des Banners)

Stromausfall bei MTB-News.de

29. Januar 2009 in Forum, Fotoalbum, MTB-News.de and Technik. 80 Comments Tags: .

Wegen eines Stromausfalls ist MTB-News seit 11:22 nicht ereichbar – wir hoffen dass es bald wieder geht.

Info vom Hoster:
Derzeit liegt eine Störung in unserer Stromversorgung vor. Unsere Techniker arbeiten mit Hochdruck an der Ursachenanalyse und der Behebung des Problems.

Wir hoffen, dass bald alles wieder geht und halten euch hier auf dem Laufenden.

Update 11:40: Server haben wieder Strom und werden hochgefahren

Update 12:00: Schätzungsweise gegen 13:00 sollte alles wieder normal laufen

Update 13:52: das ganze zieht sich etwas hin – da die Server nicht sauber runtergefahren wurden müssen sich RAID und andere Dinge erstmal initialisieren – unser aktueller Tipp ist daher ca 17:00 Uhr heute.

Info vom Hoster:

29.01.2009 13:31 Uhr
Aufgrund der vielzahl an ausgefallenen Servern, bitten wir um Verständniss, dass die Wiederherstellung von defekten Servern im Einzelfall noch den ganzen Tag über dauern kann. Die Rechenzentren beherbergen ca. 12.000 Server. Die meisten Systeme sind nach Rückkehr der Spannungsversorgung wieder verfügbar. Im Augenblick muss mit mehreren Stunden Bearbeitungszeit gerechnet werden

30.01.2009, 6:36 Uhr: Fotoalbum ist wieder da. Alles wieder im gruenen Bereich :) Danke fuer eure Geduld!

Hinweis

Wir geben zwischendurch auch Updates über Twitter heraus: twitter.com/mtbnews

MTB-News.de: Statistiken 2008

2. Januar 2009 in Forum, In eigener Sache, MTB-News.de and Technik. 1 Comment Tags: .

Es ist ja fast schon Tradition, dass wir euch zum Jahreswechsel kurz über ein paar Zahlen des vergangenen Jahres auf MTB-News.de informieren.

Zusammenfassung: 2008 war wieder sehr erfolgreich – wir haben uns in allen Eckdaten erneut verbessert.

Meine Lieblingszahl ist auch in diesem Jahr der Beitragszähler, dieser wird neben der Anzahl der registrierten Benutzer eigentlich überall zum Vergleich von Foren herangezogen. Zum Jahreswechsel hatten wir 5,39 Millionen Beiträge in der Datenbank gespeichert, verglichen mit dem Vorjahreswert von 4,31 Millionen ist das ein Zuwachs von 1,08 Millionen. Wir sind damit im Ranking der größten deutschsprachigen Boards auf Platz 13. Der Themenzähler hat sich über das Jahr auf 367.000 erhöht (Vorjahr: 308.000; Zuwachs 59.000).

Es registrierten sich 29.970 Benutzer neu bei MTB-News.de (Vorjahr: 27.000), so dass wir zum Jahreswechsel insgesamt 137.838 registrierte Benutzer führen.

Pro Tag kamen also im Schnitt 2964 neue Beiträge (plus 4,4 Prozent im Vergleich zum Vorjahr) und 162 neue Themen (+2,8 Prozent) hinzu. Es registrierten sich durchschnittlich 82 User täglich bei MTB-News.de (plus 10,5 Prozent).

Wir haben in 2008 an rund 25 Millionen Besucher insgesamt ca. 170 Millionen Seiten ausgeliefert. Das entspricht ungefähr 50 Terabyte Netzwerktraffic. Die Videoberichterstattung wäherend der Eurobike verursachte zusätzlich auch noch mal ein paar Terabyte, die ein Dienstleister für uns ausgeliefert hat.

Wir haben im Jahr 2008 ungefähr 7,5 Millionen Mails an unsere User versendet (Benachrichtigungen, Newsletter). Das entspricht durchschnittlich 14 Mails pro Minute.

MTB-News.de Forum kurz offline

30. Dezember 2008 in Forum, MTB-News.de and Technik. 1 Comment Tags: , , .

Wir arbeiten momentan (16:10) an der Datenbank des Forums – daher ist das Forum zur Zeit nicht erreichbar.

In ein paar Minuten sollte alles wieder laufen.

16.11.2008: Systemupdate

16. November 2008 in MTB-News.de. 0 Comments

Hallo,
gerade aktualisieren wir einen Teil unserer Software, MTB-News ist daher derzeit nicht erreichbar – lediglich das Fotoalbum funktioniert:
http://fotos.mtb-news.de/

Es sollten bald auch wieder die andern Bereiche laufen.
Viele Grüße
Thomas

Eurobike 2008

19. August 2008 in Diverses and MTB-News.de. 6 Comments Tags: , , .

Wie schon in den vergangenen Jahren werden wir auch dieses Jahr wieder mit Videoclips von der Eurobike und vom Eurobike Demoday berichten. Hier gibt es derzeit ein Thema dazu – wenn du ein Video eines speziellen Bikeherstellers von der Eurobike 2008 sehen möchtest melde dich kurz hier.

Alle Videos, Artikel und Fotos zur Eurobike 2008 werden wir auf einer speziellen Seite sammeln:
http://www.mtb-news.de/eurobike-2008

Wenn du selbst vor Ort bist und danach Fotos oder Artikel bei uns veröffentlichst, tagge alles mit dem Tag “eurobike2008” – Fotos und Artikel werden dann alle auf der http://www.mtb-news.de/eurobike-2008 Seite angezeigt.

Noch ein paar Details zu den Videos & Fotos:
Ich werde wieder mit Crossie und Rob vor Ort sein um zu filmen & zu fotografieren, die Videos werden wie in den letzten Jahren jeweils Abends noch online gehen.

Wir mussten im Vorfeld ein wenig rumexperimentieren – meine Sony-DV Kamera ist leider vor kurzem kaputtgegangen und ich bin auf eine Canon HF100 (Tipps zur Kamera) umgestiegen – diese zeichnet direkt auf SDHC Karten auf – das Rumhantieren und Überspielen von Bändern entfällt dadurch (ja!! ich habe nichts mehr gehasst, als abends erstmal das komplette Material in Echtzeit überspielen zu müssen und nichts tun zu können…).

Das Video-Format ist jetzt ein neues – AVCHD wird in der aktuellen Final Cut Express Version (Apple) perfekt unterstützt (das nutze ich) – Crossie ist aber Windows Nutzer und seine (nicht ganz neue) Avid-Version kann das Format nicht lesen. Nach einigen Tests haben wir uns jetzt auf ein passendes Format geeinigt, das ich ohne Aufwand und auch sehr schnell mit MPEG Streamclip ausgeben kann, und das er weiterverarbeiten kann.

Von all dem Technikkram werdet Ihr am Ende hoffentlich nicht viel mitbekommen, ausser, dass die Videos dieses Jahr in 16:9 und in besserer Qualität als im Vorjahr anzuschauen sind. Wegen dem Umstieg von 4:3 auf 16:9 wird es auch ein neues Intro geben, obwohl ich das im letzten Jahr recht gelungen fand.

Wir werden mehr Fotos als im vergangenen Jahr online stellen – der Upload im neuen Fotoalbum und das Einfügen in Forenbeiträge geht jetzt so schnell und einfach, das bietet sich einfach an. Letztes Jahr hatte Rob auch viele Fotos gemacht, das online stellen war aber mit dem alten Album etwas hakelig, da haben dann nicht alle Fotos ihren Weg ins Web gefunden.

Rikman wird in Berlin bleiben und dort darauf achten, dass die Videos über mehrere Server verteilt ausgeliefert werden. Vorteil für euch: der Download geht schneller. Vorteil für uns: wir bleiben innerhalb der uns zustehenden monatlichen Bandbreiten der Server.

Soviel als Ausblick zur Eurobike 2008. Ich freu mich drauf!

König Fußball

20. Juni 2008 in Forum and MTB-News.de. 6 Comments Tags: , , .

Anzahl der Benutzer, welche bei MTB-News.de online sind im Verlauf der letzten 24 Stunden. Grün markiert der Zeitraum des Viertelfinalspiels der deutschen Nationalmannschaft.


(Klick auf das Bild vergrößert es)