Resolved -
Die Störung ist behoben.
Wir mussten das System neu aufsetzen und ein Backup einspielen.
Scheinbar ist der SATA Controller auf dem HP-Mainboard defekt, was zu einem Schaden an beiden SSDs geführt hat. Beide SSDs waren nach einem Reboot plötzlich unlesbar, wurden aber noch erkannt. Versuche das darauf gespeicherte MDRAID zu lesen, scheiterten.
Eigentlich sollten heute nur Kernel Updates installiert werden, wozu ein Neustart nötig war. Der Powercycle verursachte dann aber erst das Sympton, da das System vorher noch lief (Aber auffällig langsame Schreibraten bot).
Unser Monitoring hat diese Störung vorab nicht erkannt. Die SMART Werte beider SSDs waren einwandfrei und das MDRAID hatte Status "UU" (Auch in Ordnung).
Das System ist wieder online. Wir bitten diese sehr ungewöhnliche Störung und die Dauer derer zu entschuldigen.
Jul 14, 16:48 CEST
Identified -
Das System lässt sich wegen eines Grub Loader Fehlers nicht mehr booten und reagiert insgesamt sehr langsam. Es liegt aktuell der Verdacht nahe, dass mindestens eine der verbauten SSDs defekt ist.
Wir arbeiten weiterhin an der Behebung.
Jul 14, 14:29 CEST
Investigating -
Es liegt eine Störung auf gamenode98 vor.
Wir arbeiten bereits an der Entstörung.
Jul 14, 13:21 CEST