Einschränkung festgestellt

Teilweise eingeschränkt - Cloud-Systeme, Projekte, Datenbankserver, SSH-Server

September 27, 2024 · 18:11 CEST
Gelöst

Die Erreichbarkeit ist vollständig wieder hergestellt.
Detaillierte Informationen zum Hergang der Störung veröffentlichen wir im Laufe der kommenden Tage in einem Post Mortem im mittwald Blog.

September 27, 2024 · 17:12 CEST
Untersuchung

Unseren weiteren Schutzmaßnahmen verzeichnen deutliche Erfolge.

September 27, 2024 · 16:13 CEST
Untersuchung

Wir arbeiten intensiv an weiteren Schutzmaßnahmen, um den Betrieb unserer Cloud-Infrastruktur wieder vollständig gewährleisten zu können. 97 Prozent der Systeme sind vollständig betriebsbereit.

September 27, 2024 · 15:09 CEST
Untersuchung

Wir machen deutliche Fortschritte bei der Wiederherstellung der einzelnen Kundenprojekte. Es sind bereits über 95% der Systeme wieder vollständig hochgefahren und betriebsbereit. Aktuell arbeiten wir daran die noch ausstehenden Systeme sukzessive wiederherzustellen um den Betrieb unserer Cloud-Infrastruktur im vollem Maße zu erreichen.

September 27, 2024 · 14:09 CEST
Beobachtung

Wir konnten das Netzwerkseitige Fehlverhalten auf zwei Netzwerkkomponenten zurückführen. (Spine-Switches, Software definied Router).Wir haben Anpassungen an den Komponenten vorgenommen und die Erreichbarkeit und Funktionalität dieser wiederhergestellt. Wir stellen fest, dass 80% der betroffenen Nodes bereits wieder hochgefahren sind. Derzeit finden noch einige notwendige Arbeiten auf den einzelnen Nodes statt, um die Erreichbarkeit aller Systeme wiederherzustellen. Bei einzelnen Projekten kann es dabei zu einem kurzzeitigen erneuten Ausfall kommen.

September 27, 2024 · 13:40 CEST
Untersuchung

Die Ursache der Störung liegt bei unseren Spine-Switches und ist auf einen DDoS-Angriff zurückzuführen. Aufgrund der Erfahrungen aus der letzten Störung möchten wir derzeit noch keine zeitliche Einschätzung zur voraussichtlichen Entstörung geben.

September 27, 2024 · 12:57 CEST
Untersuchung

Derzeit treten Netzwerkprobleme auf, die durch einen DDoS-Angriff ausgelöst wurden. Unsere Techniker sind bereits dabei, das Problem zu beheben.

September 27, 2024 · 12:27 CEST
Untersuchung

Wir haben die Ursache der Störung identifiziert und arbeiten nun an der Behebung.

September 27, 2024 · 11:51 CEST
Vorfall

Wir haben eine Einschränkung festgestellt und unsere Techniker*innen arbeiten mit Hochdruck an der Lösung.