Stellungnahme zum Ausfall

boerse

libertas est potestas
Crew
Registriert
28 April 2021
Beiträge
283
Erhaltene Likes
2.019
Liebe Boersianer,

Ihr habt es ja alle mitbekommen: Unsere Boerse war über einen Monat offline, und dass es so lange gedauert hat, lag auch an uns. Eigentlich können wir sogar noch von Glück reden.

Systemadministratoren betonen es immer wieder: Man braucht einen Disaster-Recovery-Plan. Genau dieser ist bei uns komplett gescheitert. Es gab keine richtigen Off-site-Backups, und die vorhandenen waren so alt, dass sich eine Wiederherstellung daraus schlicht nicht gelohnt hätte.

Warum wir trotzdem von Glück reden?
Wie bereits erwähnt, hatten wir einen Backup-Server. Die Boerse war schon immer bei Virtual Systems (VSYS) gehostet, auch schon vor dem Krieg. Unser Setup bestand aus einem dedizierten Server im Rechenzentrum DC1 und einem zweiten dedizierten Server für Backups im Rechenzentrum DC2, beide bei VSYS. Die Backups liefen täglich nachts um 3:00 Uhr und wurden auf den Backup-Server in DC2 übertragen.

Was war nun das Gravierendste?
Beide Rechenzentren, in denen VSYS seine Racks betrieb, wurden am selben Tag angegriffen und abgeschaltet in Ukraine. Na toll!
Was bedeutet das? Wir hatten keine richtigen Off-site-Backups und haben uns nur auf einen einzigen Backup-Server verlassen.

Ich habe mir damals gedacht: Wie wahrscheinlich ist es, dass beide Server gleichzeitig ausfallen? Die Wahrscheinlichkeit schien mir sehr gering.
Aber es ist passiert, und wir haben aus unseren Fehlern gelernt.

Was wäre noch schlimmer gewesen?
Wenn beide Standorte so stark zerstört worden wären, dass keiner der Server mehr hätte gerettet werden können. Dann gäbe es uns vermutlich gar nicht mehr.

Habe ich daraus gelernt?
Ja, definitiv. Wir handhaben das jetzt komplett anders: Off-site-Backups, automatisierte Backups in anderen Ländern und mehrere Standorte. Wir hoffen, dass wir nie wieder so lange ausfallen werden.

Dafür entschuldige ich mich und freue mich auf viele weitere Jahre mit unserer Boerse.
 

GuyFawkes667

Just a sad men who lost too much in his life...
Registriert
21 September 2021
Beiträge
1.969
Erhaltene Likes
4.785
Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!
Es gibt absolut KEINEN Grund sich für irgendetwas entschuldigen zu müssen.
Da waren 2 Server im Betrieb, beide wurden durch "höhere Macht" beschädigt.
Und es war "höhere Macht", weil wer denkt denn ersthaft, das es zu solch einem Ereigniss real kommen würde?

Klar, hinterher ist man immer schlauer, aber was da für blöde Kommentare in der Shoutbox aufgetaucht sind... da kann ich nur mit dem Kopf schütteln.
Urgh... wobei ich mich jetzt an all die Kommentare dort erinnere und noch nie so viele Prengel/Muschi-Sprüche vorher ertragen musste (Ok, vom Wehrdienst damals abgesehen...^^).
Da lohnt sich so starkes Kopfschütteln, das es einer leichten Gehirnerschütterung gleich kommt. :ROFLMAO: (y)

Ich kann nur sagen, das ich verdammt froh bin, das Ihr wieder erreichbar seid.
Mit Veränderungen kann ich nicht sonderlich gut umgehen, da brauche ich doch meinen "Fels in der Brandung".
(Der "Fels in der Brandung" ist natürlich eine Anspielung auf alle, welche die hohe See bereisen und stolze Piraten sind)
 
Kommentieren

Thanos

Namhafter Pirat
Registriert
7 März 2022
Beiträge
609
Erhaltene Likes
1.390
Danke für die ehrlichen Worte, das ist auch nicht selbstverständlich. Schlussendlich ist es in meinen Augen ja immer noch ein Hobbyprojekt, oder? Wie finanziert sich das Projekt überhaupt? Aber egal.

Was ich trotzdem noch interessant finde: Obwohl Vsys wusste, dass die Server intakt sind, wieso haben sie fast einen Monat gebraucht? Fehlte die Kapazität?

Hätten sie die Daten nicht irgendwie rüberkopieren können oder so?
 
Kommentieren

xNecromindx

Namhafter Pirat
Registriert
6 Mai 2021
Beiträge
3.048
Erhaltene Likes
7.646
Dir sollte doch schon klar sein, dass da mehr als nur ein Server im Rechenzentrum steht?
Dir ist auch klar, dass wenn da eine Drohne den Laden sprengt, erst einmal Behörden mit einem Absperrband stehen, die erst einmal die Lage sichern?
Dann muss das alles seinen Gang gegen, Stück für Stück in einem zerstörten Gebäude beborgen werden. Wasserschäden wurden vom Betreiber ja genannt...

Das alles eben nicht für einen Server, sondern potenziell viele hunderte - und da kommt eben Marktwirtschaft ins Spiel: Die wichtigsten Kunden zuerst.
Auch wenn man sich selbst immer für besonders wichtig hält... aber ich glaube die haben interessantere Kunden als uns.
 
Kommentieren

constl

Pirat
Registriert
15 Mai 2021
Beiträge
2
Erhaltene Likes
10
Das Backup dürfte ja nicht riesig sein. Warum nicht einfach zusätzlich immer ein verschlüsseltes Backup auf dem eigenen NAS oder PC speichern? Klar, für eine schnelle Wiederherstellung ist das nicht geeignet, aber immerhin hätte man noch eine Absicherung. In so einem Notfall müsste ich mit meiner Leitung wohl 30 Tage lang Daten hochladen, aber besser als nichts. ;)
 
Kommentieren

GuyFawkes667

Just a sad men who lost too much in his life...
Registriert
21 September 2021
Beiträge
1.969
Erhaltene Likes
4.785
Kommentieren

tastebin

InventarNr. #290621
Crew
Registriert
29 Juni 2021
Beiträge
3.867
Erhaltene Likes
9.040
Mit wem ich mich alles rumgeschlagen habe. 🤭 Ist schon mehr wie ein Hobby 🍻
 
Kommentieren

GuyFawkes667

Just a sad men who lost too much in his life...
Registriert
21 September 2021
Beiträge
1.969
Erhaltene Likes
4.785
Kommentieren

tastebin

InventarNr. #290621
Crew
Registriert
29 Juni 2021
Beiträge
3.867
Erhaltene Likes
9.040
Oh nicht nur in der ShitBox. Ich hab mir gleich den ersten Artikel gekapert um unseren Leuten zu sagen das wir nicht weg sind. War ja leider TK, aber ich wusste was kommt und hab's in Kauf genommen
 
Kommentieren

doofi

Namhafter Pirat
Registriert
18 Mai 2021
Beiträge
476
Erhaltene Likes
580
Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!
außerhalb des Erdballs auch schon? Falls die Welt dann doch mal untergeht will ich mir noch all den Stuff von @xNecromindx durchlesen. Das ist immer so ausführlich 🤣
Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!
(Erinnert mich an meiner Süßen, der im Betrieb mal eine externe HDD umfiel, 10 Jahre Bilder ,......... )

Ich freu mich das es hier alles geklappt hat und drück die Daumen für die Zukunft.
 
Kommentieren

tastebin

InventarNr. #290621
Crew
Registriert
29 Juni 2021
Beiträge
3.867
Erhaltene Likes
9.040
Das dumme Gelaber bei TK. Das musste ja kommen. Aber ich hab mich nicht schlecht geschlagen würde ich sagen.
 
Kommentieren
Oben