Seit der Wiederherstellung laufen alle Dienste von CitexNode Deploy stabil. Der Vorfall ist behoben.

Der Datenbank-Cluster ist wiederhergestellt (alle drei Knoten synchron, keine Daten verloren). Websites, Datenbanken, Speicher und Builds von CitexNode Deploy laufen wieder. Wir beobachten die Lage noch eine Weile.

Der Host ist wieder am Netz, die Web-Knoten laufen und Websites ohne Datenbank sind wieder erreichbar. Die MariaDB-Datenbanken der Deploy-Projekte starten nach dem harten Neustart noch nicht von selbst; wir stellen den Datenbank-Cluster gerade wieder her. Seiten, die eine Datenbank nutzen, können bis dahin Fehler zeigen.

Ursache gefunden: Der Rechenzentrumsbetreiber hat den Host des Web-Clusters vom Netz getrennt, sehr wahrscheinlich ausgelöst durch den Datenverkehr unseres geplanten Umzugs. Die Knoten selbst laufen weiter, es gehen keine Daten verloren. Wir haben die Freischaltung angefragt; danach sind die Seiten ohne weiteres Zutun wieder erreichbar.

Der Host, auf dem der Web-Cluster läuft, ist seit kurz nach 10:15 Uhr nicht mehr erreichbar. Websites und Apps auf CitexNode Deploy sowie Builds sind dadurch ausgefallen. Alle anderen Dienste (Dashboard, API, Game-Server, Bots, Mail) sind nicht betroffen. Wir sind mit dem Rechenzentrum in Kontakt.