ZAP-Hosting Ausfall am 17.01.2021

In der 10,5 jährigen Geschichte von ZAP-Hosting gab es am Sonntag, den 17.01.2021 einen Netzwerkausfall der Hauptlocation "Frankfurt am Main -> Eygelshoven".
Wir informieren Dich im Folgenden über die Hintergründe und Ursachen. Am Ende des Blogeintrages findest du einen 10 € ZAP Guthaben Entschädigungsgutschein.

Aktuell werden alle deutschen ZAP-Hosting Netze im Interxion Rechenzentrum in Frankfurt am Main über Combahton announced und routed.
Dort geschieht auch das extrem leistungsstarke und für Gameserver optimierte DDoS Filtering. Combahton schiebt den "clean traffic" dann über eine Leitung der British Telecom nach Eygelshoven, NL, wo der Großteil unserer Server (inkl. Website etc.) steht.
Der Link der British Telecom, welcher über i3d.net gemietet ist, fiel am Sonntag gegen 08:00 Uhr morgens aus. Wie wir später erfahren, handelte es sich um nicht angekündigte Wartungsarbeiten der British Telecom. Es ist bereits das zweite Mal, dass die British Telecom Wartungsarbeiten nicht ankündigt oder der besagte Provider die Wartungsarbeiten nicht weitergegeben hat.

Für so einen Fall soll eine Redundanz über Amsterdam Abhilfe schaffen. Dafür haben wir einen Tunnel im Eyhelshoven Rechenzentrum, der im Falle eines Ausfalls das VLAN über Amsterdam nach Frankfurt wiederherstellt. Der Tunnel ist jedoch auf 10gbit/s begrenzt, was seit einigen Monaten nicht mehr ausreicht, da ZAP in den vergangenen Monaten einen sehr starken Wachstum hingelegt hat.
Aus diesem Grund war die Leitung maßlos überlastet und es gab mehrere Stunden massive Paketverluste.

Anstatt in Frankfurt zu routen, werden wir noch diese Woche erforderte Netzwerkhardware und Router nach Eygelshoven bringen und alle Netze hier announcen. Das ermöglicht es uns, das Routing direkt aus Eygelshoven zu steuern und sowohl den direkt Link nach Frankfurt, als auch über Amsterdam mit jeweils einer BGP Session routen.

Es sind so beide Links gleichzeitig aktiv, wenn ein Link ausfällt, merkt der User nahezu nichts davon. Es muss also nicht erst ein limitierter Backup Tunnel aktiv werden, wie es aktuell der Fall ist.