Stellungnahme zum Ausfall

Liebe Boersianer,

Ihr habt es ja alle mitbekommen: Unsere Boerse war über einen Monat offline, und dass es so lange gedauert hat, lag auch an uns. Eigentlich können wir sogar noch von Glück reden.

Systemadministratoren betonen es immer wieder: Man braucht einen Disaster-Recovery-Plan. Genau dieser ist bei uns komplett gescheitert. Es gab keine richtigen Off-site-Backups, und die vorhandenen waren so alt, dass sich eine Wiederherstellung daraus schlicht nicht gelohnt hätte.

Warum wir trotzdem von Glück reden?
Wie bereits erwähnt, hatten wir einen Backup-Server. Die Boerse war schon immer bei Virtual Systems (VSYS) gehostet, auch schon vor dem Krieg. Unser Setup bestand aus einem dedizierten Server im Rechenzentrum DC1 und einem zweiten dedizierten Server für Backups im Rechenzentrum DC2, beide bei VSYS. Die Backups liefen täglich nachts um 3:00 Uhr und wurden auf den Backup-Server in DC2 übertragen.

Was war nun das Gravierendste?
Beide Rechenzentren, in denen VSYS seine Racks betrieb, wurden am selben Tag angegriffen und abgeschaltet in Ukraine. Na toll!
Was bedeutet das? Wir hatten keine richtigen Off-site-Backups und haben uns nur auf einen einzigen Backup-Server verlassen.

Ich habe mir damals gedacht: Wie wahrscheinlich ist es, dass beide Server gleichzeitig ausfallen? Die Wahrscheinlichkeit schien mir sehr gering.
Aber es ist passiert, und wir haben aus unseren Fehlern gelernt.

Was wäre noch schlimmer gewesen?
Wenn beide Standorte so stark zerstört worden wären, dass keiner der Server mehr hätte gerettet werden können. Dann gäbe es uns vermutlich gar nicht mehr.

Habe ich daraus gelernt?
Ja, definitiv. Wir handhaben das jetzt komplett anders: Off-site-Backups, automatisierte Backups in anderen Ländern und mehrere Standorte. Wir hoffen, dass wir nie wieder so lange ausfallen werden.

Dafür entschuldige ich mich und freue mich auf viele weitere Jahre mit unserer Boerse.

boerse schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Es gibt absolut KEINEN Grund sich für irgendetwas entschuldigen zu müssen.
Da waren 2 Server im Betrieb, beide wurden durch "höhere Macht" beschädigt.
Und es war "höhere Macht", weil wer denkt denn ersthaft, das es zu solch einem Ereigniss real kommen würde?

Klar, hinterher ist man immer schlauer, aber was da für blöde Kommentare in der Shoutbox aufgetaucht sind... da kann ich nur mit dem Kopf schütteln.
Urgh... wobei ich mich jetzt an all die Kommentare dort erinnere und noch nie so viele Prengel/Muschi-Sprüche vorher ertragen musste (Ok, vom Wehrdienst damals abgesehen...^^).
Da lohnt sich so starkes Kopfschütteln, das es einer leichten Gehirnerschütterung gleich kommt.

Ich kann nur sagen, das ich verdammt froh bin, das Ihr wieder erreichbar seid.
Mit Veränderungen kann ich nicht sonderlich gut umgehen, da brauche ich doch meinen "Fels in der Brandung".
(Der "Fels in der Brandung" ist natürlich eine Anspielung auf alle, welche die hohe See bereisen und stolze Piraten sind)

Danke für die ehrlichen Worte, das ist auch nicht selbstverständlich. Schlussendlich ist es in meinen Augen ja immer noch ein Hobbyprojekt, oder? Wie finanziert sich das Projekt überhaupt? Aber egal.

Was ich trotzdem noch interessant finde: Obwohl Vsys wusste, dass die Server intakt sind, wieso haben sie fast einen Monat gebraucht? Fehlte die Kapazität?

Hätten sie die Daten nicht irgendwie rüberkopieren können oder so?

Dir sollte doch schon klar sein, dass da mehr als nur ein Server im Rechenzentrum steht?
Dir ist auch klar, dass wenn da eine Drohne den Laden sprengt, erst einmal Behörden mit einem Absperrband stehen, die erst einmal die Lage sichern?
Dann muss das alles seinen Gang gegen, Stück für Stück in einem zerstörten Gebäude beborgen werden. Wasserschäden wurden vom Betreiber ja genannt...

Das alles eben nicht für einen Server, sondern potenziell viele hunderte - und da kommt eben Marktwirtschaft ins Spiel: Die wichtigsten Kunden zuerst.
Auch wenn man sich selbst immer für besonders wichtig hält... aber ich glaube die haben interessantere Kunden als uns.

Das Backup dürfte ja nicht riesig sein. Warum nicht einfach zusätzlich immer ein verschlüsseltes Backup auf dem eigenen NAS oder PC speichern? Klar, für eine schnelle Wiederherstellung ist das nicht geeignet, aber immerhin hätte man noch eine Absicherung. In so einem Notfall müsste ich mit meiner Leitung wohl 30 Tage lang Daten hochladen, aber besser als nichts.

xNecromindx schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Soweit ich das verstanden habe, war das Datencenter wohl gerade für die Ukrainische Infrastruktur von extremer Bedeutung.
Also nicht nur "Server zum anmieten für Stuff", sondern für die digitale Versorgung unabdingbar.

Danke auf alle Fälle an das Team und dass nun wieder alles läuft

Da brauch man sich für nichts entschuldigen.
Danke das es wieder Online ist

Danke, @boerse
Die Seite hier ist für viele schon ein großes Stück des täglichen Hobbies.

Mit wem ich mich alles rumgeschlagen habe. Ist schon mehr wie ein Hobby

Ihr macht einen mega Job. Danke, dass ihr wieder online seid!

tastebin schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Du und @level9 wart aber auch in der Shitbox anwesend. Kann ich so jetzt nicht über alle anderen Mods sagen. Fasst das aber bitte nicht persönlich auf.
Würde ja sogar Necro als Mod vorschlagen, aber mit seinen KI-Bots? NOPE!

Oh nicht nur in der ShitBox. Ich hab mir gleich den ersten Artikel gekapert um unseren Leuten zu sagen das wir nicht weg sind. War ja leider TK, aber ich wusste was kommt und hab's in Kauf genommen

boerse schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

außerhalb des Erdballs auch schon? Falls die Welt dann doch mal untergeht will ich mir noch all den Stuff von @xNecromindx durchlesen. Das ist immer so ausführlich

boerse schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

(Erinnert mich an meiner Süßen, der im Betrieb mal eine externe HDD umfiel, 10 Jahre Bilder ,......... )

Ich freu mich das es hier alles geklappt hat und drück die Daumen für die Zukunft.

tastebin schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Ach guck: Er ist schuld!

Man hänge ihm das Schild "ER IST SCHULD!" um den Hals, was er von nun an 1 Monat tragen wird!

Das dumme Gelaber bei TK. Das musste ja kommen. Aber ich hab mich nicht schlecht geschlagen würde ich sagen.

GuyFawkes667 schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Die Chatbox bzw. Shoutbox auf unserer Maintenance-Seite war eigentlich ein gravierender Fehler. Ich als alter Mann bin immer noch an die Zeit ab 2005 mit IRC, ICQ und den üblichen Foren gewöhnt, wo man sich noch normal unterhalten konnte. Dabei habe ich völlig vergessen, dass wir inzwischen in der reizüberfluteten Internet-Generation leben, in der Ungeduld und Aufmerksamkeitsprobleme bei den meisten tagtäglich auf dem Programm stehen.

Und ja, wir haben uns ehrlich gesagt an unsere kleine Community gewöhnt. Zum Glück ist alles glimpflich ausgegangen.

Thanos schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Ja, es ist definitiv ein Hobbyprojekt. Entstanden ist es, nachdem Boerse.to verschwunden ist. Wieso ist Boerse.to eigentlich verschwunden? Das frage ich mich bis heute. Finanzieren? Aus eigener Tasche.

Wir wussten bereits in den ersten Tagen, dass unsere Server intakt sind. Das hat uns der Vsys-Support auch bestätigt. Danach gab es einen Monat lang nur noch Ticketverkehr zwischen dem Support und mir. Man wurde alle paar Tage auf den neuesten Stand gebracht und eigentlich nur hingehalten. Aber hey, ich habe es trotzdem etwas locker genommen, nachdem ich wusste, dass die Server intakt sind. Sogar beide waren intakt, der Main- und der Backup-Server.

Man darf es den Jungs in der Ukraine nicht übel nehmen. In diversen Webmaster-Foren beschweren sich bis heute einige Vsys-Kunden, weil ihre Server immer noch nicht funktionieren. Vermutlich arbeiten bei Vsys nur ein paar Leute, die das managen, mehr auch nicht. Vsys ist nicht Hetzner. Und die befinden sich sowieso im Krieg, die müssen Hunderte Server irgendwo hinbringen. Die haben es vermutlich gar nicht einfach.

constl schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Das Backup ist definitiv nicht riesig. So etwas zu managen ist eigentlich sehr einfach. Man könnte es noch professioneller aufziehen, die Datenbank an mehrere Standorte replizieren und alles spiegeln. Wenn ein Standort ausfällt, springt der nächste ein. Ich habe mir damals immer Gedanken über so etwas gemacht, aber schon eine normale dedizierte Kiste ist kostspielig, und eine zweite dedizierte Kiste als Backup ist es ebenfalls.

Ich habe hier bisher ein paar Mal Werbung geschaltet: Wenn mich jemand per PN kontaktiert hat, habe ich Banner eingebaut. Das hat die Kosten für ein paar Monate überbrückt. Rechnet man aber auf die letzten sechs Jahre, sind es schon einige Tausend Euro. Das ist es mir aber wert. Es geht mir nicht ums Geld, sondern nur um die Community, die wir haben und die immer noch weiterlebt.

Eine Disaster-Recovery-Lösung hätte ich von Anfang an organisieren können, oder spätestens, nachdem der Krieg angefangen hat. Ich habe jedoch mit der Mentalität gelebt: „Ich habe einen separaten Backup-Server in einem anderen DC, beide Server können niemals gleichzeitig ausfallen." Und trotzdem ist es passiert. Karma halt. Vielleicht hat uns jemand den bösen Blick zugeworfen.

Jedenfalls habe ich aus den Fehlern gelernt. Hoffentlich erleben wir so etwas nie wieder. Und falls doch, dann sind wir spätestens nach einem Tag wieder am Start. Mehr nicht.

tastebin schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Das geistfreie Gesabbel mancher Leute dort ging mir MÄCHTIG auf die Testikel...

Knorkator303 schrieb:

Bitte, Anmelden oder Registrieren um den Inhalt zu sehen!

Zum Vergrößern anklicken....

Vor allem haben die den Admin ja so abgestempelt, als wäre er technisch gar nicht versiert. Dass der Admin jetzt so transparent ist und ehrlich sagt, was los war, ist eine Ohrfeige für alle bei Tarnkacke, die dort im Forum irgendwas behauptet haben.

Ich habe aktiv mitgelesen, und es ist ehrlich lustig, was einige da behauptet haben. Man hat fast den Eindruck, die sind alle aus ihren Höhlen gekrochen und haben nur auf diesen Moment gewartet, um nach 6 Jahren ununterbrochener Betriebszeit von Boerse endlich ihre Geilheit loszuwerden.

Besser kann man es nicht ausdrücken.