🥇Geschichten aus dem Rechenzentrum: Halloween-Geschichten über Diesel, Diplomatie und Selbstschneider im Heizkörper

Mein Kollege und ich haben überlegt: Warum sollten wir vor unserem liebsten Horrorfest nicht an all die Albträume denken, mit denen Menschen im Rechenzentrumsbau konfrontiert werden? Also, schaltet das Licht aus, spielt ein beunruhigendes Musikstück ab, jetzt kommen Geschichten, die uns manchmal noch schweißgebadet aufwachen lassen.

Das Bürogespenst

In einem bürotauglichen Gebäude haben wir einen Serverraum und allerlei Automatisierungssysteme für Klimaanlagen eingerichtet, unter anderem Jalousien mit Antrieben. Auf dem Dach steht eine Wetterstation, die erkennt, von welcher Seite die Sonne scheint, und schließt die Jalousien, wenn es zu hell wird. Das Projekt haben wir abgenommen und vergessen, aber nach einiger Zeit rufen sie an und fragen:

— Könnten Sie die Jalousien bitte wieder manuell steuern? Wir möchten alles selbst schließen.
— Warum?!
— Unsere Putzkräfte haben Angst. Und wir auch — es fühlt sich an, als wäre dort ein Geist.

So sieht der Albtraum eines Automatisierungsspezialisten aus: Zuerst möchte der Kunde Automatisierung und Energieeffizienz, du stellst alles fröhlich bereit, und dann stellt sich heraus, dass der Chef selbst die Kontrolle übernimmt. Und im Raum, wo das Klimamanagement völlig automatisiert ist, läuft letztendlich alles im manuellen Modus.

In den Büros von verschiedenen Führungskräften installieren wir oft Touch-Panels, von denen aus man Lichtszenerien, Klimaanlagen, Belüftung und Jalousien steuern kann. Ein besonders konservativer Chef sagte: Ich möchte keine Algorithmen, ich will zwei Knöpfe: „Alles einschalten“ und „Alles ausschalten“. Ein Programmierer kam vorbei, weinte, als er das Standardsteuerungsschnittstelle entfernte, malte stattdessen zwei Knöpfe und fuhr heulend nach Hause.

Wo sind unsere Diesel?

In einer dunklen, dunklen Nacht, in einem dunklen, dunklen Raum, klingelte das Mobiltelefon des Technikers Oleg.

— In unserer Dieselanlage ist die Kühlmitteltemperatur zu hoch. Ich schicke gleich einen Screenshot.

Das war der Dispatcher des Rechenzentrums, den wir vor einem Monat guten Gewissens abgenommen hatten. Ihn störte es nicht, dass es drei Uhr nachts war, noch dass das System dieselbe „Temperatur“ im Diesel und im Raum anzeigte. Denn das war überhaupt keine Temperatur, sondern ein Fehlercode „keine Verbindung zum Sensor“. Oleg sagte dem Dispatcher ehrlich, wo er in der Nacht mit solchen Anfragen hingehen sollte. Wortwörtlich:

— Geh zu den Dieseln, schau nach, wahrscheinlich ist einfach die Batterie im Sensor leer. Das Batteriemodul in den Dieseln versorgt dieses Steuerpanel, da gibt es einen Schalter — wenn jemand von euch ihn berührt hat, muss er zurückgedreht werden.

Der Dispatcher ist gerade die Person, die das Objekt so gut kennen muss wie ein erfahrener Fräser seine drei Finger, aber hier kam eine erstaunliche Frage:

— Und wo sind die Diesel?
— Geh in den zweiten Stock, frage bei den Elektrikern, die werden dich hinführen.

Die nächsten 20 Minuten arbeitete Oleg aus der Ferne als Navigator und versuchte, den Dispatcher und die Elektriker zusammenzubringen, die nicht wirklich Lust hatten, nachts jemanden herumzuführen.

Der Kreislauf der Probleme im Rechenzentrum

In einem weit entfernten Königreich, im dreißigsten Staat, hatten wir irgendwie einen Ausfall bei uns des Frequenzumrichters auf Chiller. Genau drei Stunden vor der Zertifizierung beim Uptime Institute. Es lohnt sich nicht, die Geschichte über Chiller und Frequenzumrichter zu erzählen, wenn du sie nicht kennst. Glaubt einfach: Sie müssen arbeiten wie ein Uhrwerk, sonst verwandelt sich die Zertifizierung in einen Kürbis und der Auftraggeber wird zur bösen Stiefmutter. Und das ärgerlichste ist, dass er Recht hat, denn für den Besuch der Kommission werden horrende Summen verlangt, und wenn etwas schiefgeht, gibt es keine Rückkehr.

Der Servicetechniker des Anbieters kam, zuckte mit den Schultern und sagte, dass der Patient eher tot sei und man mindestens einen Monat auf ein neues Board warten müsse. Die Kommission steht bereits vor der Tür, die Ausgänge sind nicht viele. Die erste Möglichkeit — den Frequenzumrichter von einem "gesunden" Chiller abschrauben und auf den "kranken" setzen, und dann die beiden wechseln, bis die Tests vorbei sind. Das ist kein Schummeln, nur damit ihr wisst: Laut Testregeln ist einer der drei Chiller ohnehin reserviert, daher ist das Szenario durchaus machbar. Der zweite Ausweg — versuchen, einen neuen Frequenzumrichter in den verbleibenden anderthalb Stunden zu finden. Wir riefen unseren Kältetechniker in Moskau an. Der Kältetechniker kontaktierte einen Bekannten innerhalb des russischen Vertreters des Anbieters. Dieser wiederum drückte auf das Handelsbüro des Herstellers in den Niederlanden und… nach einer halben Stunde befestigten sie uns bereits ein neues Board. Die Zertifizierung verlief hervorragend.

Unvollendete Arbeiten

Egal wie lange, es gibt immer einen Moment auf der Baustelle, wenn alle Subunternehmer verschwinden und nur noch sie bleiben: die Unvollendeten. Das bezieht sich auf die nicht abgeschlossenen Arbeiten, nicht auf die, die sie hinterlassen haben, falls das klar ist. Wer als Letzter kommt, der räumt auf.

Wir haben einmal ein Rechenzentrum im Keller gemacht: Server-Racks in zwei Reihen, an einem Rand ausgerichtet, damit die Tür geöffnet werden konnte. Dadurch entstand zwischen einer Reihe und der Wand eine Lücke, und der Kunde weigerte sich, das Abnahmeprotokoll aufgrund dieser Lücke zu unterschreiben. Der Techniker und der Projektmanager mussten früh am Morgen in den "Leroy Merlin" fahren, um Styropor, Farbe und Befestigungen zu kaufen, und verschlossen gewissenhaft die Lücke, damit sie mit den Racks in einer Farbe übereinstimmte. Wir haben es abgegeben.

Und einmal, nach dem Abgang der Heizungsbauer, stellte sich im Projekt eine Diskrepanz heraus: Es sollten 7 Heizkörper installiert werden, aber es waren nur 6. Wir haben nachgezählt – alles korrekt, sie haben tatsächlich einen Heizkörper im Flur nicht installiert. Es ist zu spät, "Borjomi" zu trinken, alles war bereits montiert und geprüft. Der Kunde streute sich Asche auf den Kopf, weil die Protokolle bereits unterschrieben waren. Wieder rettete "Leroy Merlin" – wir haben dort einen Elektroheizlüfter gekauft, einen Kabelstrang in den Flur gezogen und am Sonntagmorgen selbst installiert, der Kunde war glücklich.

Einmal haben sie uns anstelle einer Brandschutzwand ein magisches Nichts hinterlassen. Im Rechenzentrum geht der Zuluftkanal der Belüftung vom zweiten Stock in den Keller, durch einen Raum, der nach der Brandschutzklassifizierung in eine andere Kategorie gehört als die Räume darüber und darunter. In der Praxis bedeutet das, dass im Luftkanal ein Brandverzögerungselement sein muss und darum herum eine Brandschutzwand. Um unseren leuchtenden Luftkanal mit dem Brandverzögerungsventil gab es ein Loch, rate mal, wer und wie es verschlossen hat? "Leroy Merlin" hat diesen Beitrag nicht gesponsert, schade.

Dale Carnegie raucht nervös.

Vor langer Zeit, als das Gras grüner war und der Dollar bei 30 irgendwas lag, haben wir ein Rechenzentrum für eine Bank im historischen Zentrum von Moskau gebaut. Wir mussten uns an extrem knapp bemessene Fristen halten. Aber die Gassen dort sind eng, die Durchgänge beim Gebäude ebenfalls, mehrere Tonnen Ausrüstung auf die benötigte Etage über Treppen zu heben – praktisch unmöglich. Wir sagten dem Kunden, dass er mit einem Kran direkt auf das Dach laden müsste, der Kunde antwortete im Geiste "Du bist ein Cowboy – springe selbst". Gut, also eine gute Idee, aber jetzt müssen wir die Ankunft eines 120-Tonnen-Krans mit Instanzen wie der Verkehrsbehörde abstimmen. Und vorzugsweise schon gestern. Viel Glück bei Ihrem Vorhaben, wenn Sie es nicht rechtzeitig schaffen – Geldstrafe.

Die Situation ist festgefahren, die Zeit drängt, und wir haben beschlossen, ein Risiko einzugehen; schließlich sind die Bußgelder von der GIBDD im Vergleich zu den Bußgeldern für die Nichteinhaltung von Fristen lediglich ein Klacks. Am Samstagmorgen brachte man den 16-Meter-Kran, in der Hoffnung, alles schnell erledigen zu können. Nach ein paar Stunden kam der zuständige Beamte und fragte schüchtern um Erlaubnis. Die hatten wir natürlich nicht. Und wie alles geendet wäre, ist unklar, wenn nicht ein Verkäufer mit bemerkenswerten diplomatischen Fähigkeiten zufällig bei uns gewesen wäre.

Er zog den Beamten zur Seite, erklärte ihm fünf Minuten lang etwas, der Polizist änderte während dieser Zeit mehrmals seine Miene, aber letztendlich stieg er in seinen UAZ und rief, dass er selber kommen würde, um uns zu helfen, falls etwas passieren sollte. Welche Argumente da vorgebracht wurden, verrät der Verkäufer bis heute nicht.

Hebt mich hoch, Leute!

Hinter den Bergen, hinter den Feldern, aber im Bereich des Dritten Verkehrskreuzes, stand ... nein, keine Hütte, sondern eine durchaus ernsthafte staatliche Baustelle. Eine komplexe Nachtschicht, wir laden Geräte ab. Der letzte Lkw mit einem 15-Tonnen-Teil auf der Ladefläche fährt auf die einzige Kreuzung im Gebiet, irgendetwas platzt mit lauten Geräuschen, und das Ungetüm landet mit dem Bauch im schlammigen Boden. 5 Uhr morgens, die Baustelle erwacht allmählich, der Fahrer des Betonmischers hinter unserem Lkw, der die gefallenen Frauen benennt, fragt unmissverständlich: ob wir denn nicht vorhätten, die Straße freizumachen? Sein Beton erkaltet schließlich. Und wir wären froh, denn um 7 Uhr kommt einer der zahlreichen Stellvertreter eines Ministers, und wenn er dieses Chaos sieht, wird es für alle Konsequenzen geben: von den Ingenieuren bis zu den Führungskräften.

Der Techniker rennt zum lokalen Kranführer, bittet ihn flehentlich, das Teil aus der Ladefläche anzuheben, damit wir einen anderen Lkw darunter schieben können. Doch der weigert sich, nicht einmal gegen Geld. Unsere Situation wurde durch unseren Ingenieur gerettet — er vereinbarte es über den Leiter des Kranführers. Das Eisenstück haben wir schließlich dorthin gebracht, wo es gebraucht wurde, aber wir sind schon etwas grau geworden.

Und dann wurden wir ziemlich grau, an demselben Objekt. Es geschah ein epischer Fehltritt im wahrsten Sinne des Wortes.

Es gibt so eine Sache: einen teleskopischen Gabelstapler. Man verwendet ihn, wenn es auf der Baustelle keinen Platz gibt, um sich zu bewegen, und die Last nach oben gehoben und vorsichtig platziert werden muss. Mit seiner Hilfe mussten wir ein 1,5-Tonnen-Modul durch ein Fenster über eine Grube entladen. Nichts deutete darauf hin: Laut Spezifikation sollte die Maschine 2 Tonnen und mehr aushalten können. Doch als es bis zum Fenster genau einen halben Meter war, brachen die "Gabeln" des Staplers ab, und das Stück Metall fiel aus großer Höhe herunter. Es blieb nichts anderes übrig — wir riefen den Hersteller an, damit jemand kam und die Reparaturen durchführte. Ihre Servicetechniker kamen und… weigerten sich, die Baustelle zu betreten. Weil man dafür einen Weg gehen musste, auf dem ein Bagger stand und grub. Wir waren es gewohnt: 10 Sekunden gewartet, während der Ausleger in die entgegengesetzte Richtung des Weges zeigt, und dann losgerannt. Die Jungs waren schockiert. Wir mussten dieses Merkmal wie eine aufregende Attraktion darstellen, als wäre es "Fort Boyard", und sie haben das Modul schließlich für uns repariert.

Nicht augenblickliche Karma

Es ist bald Märchenzeit, aber die Dinge erledigen sich nicht so schnell, besonders wenn es um die Unterzeichnung von Abnahmeprotokollen für die durchgeführten Arbeiten geht. Wir haben einmal ein hervorragendes Rechenzentrum für ein Unternehmen gebaut. Aber der edle Auftraggeber beschloss, uns die letzte Prüfung aufzuerlegen:
„In Ihrer Spezifikation stehen 100 Schrauben für die Rinne, aber ich habe 97 gezählt. Korrigieren Sie die Spezifikationen und Kostenschätzungen oder ich werde nichts unterschreiben.“

Und jedes Mal machten wir uns auf den Weg, über weite Strecken, und zählten gemeinsam mit dem edlen Auftraggeber entweder die Befestigungen für die Luftkanäle, oder die Schrauben, oder die Bolzen. Jedes Mal stellte sich heraus, dass es nicht 97, sondern 99 usw. waren. Und wir hatten keine Ruhe. Letztendlich haben wir so viele interne Kosten aufgeladen, dass unsere Vorgesetzten nicht mehr mitmachten. Sie sagten: Lass sie tun, was sie wollen — dorthin fährt niemand mehr. So blieben wir ohne Unterschriften.

…Und ein Jahr später kommt der Auftraggeber selbst und fragt höflich, wo er unterschreiben solle? Es stellte sich heraus, dass das Revisionsamt kam und er unbeachtete Ausrüstung im Wert von sieben Nullen hatte.

Wingardium Leviosa!

Es war einmal ein guter Auftraggeber, der sich entschied, ein altes Gebäude für ein Rechenzentrum zu kaufen. Doch lange dauerte seine Freude nicht: Es begann, in der Batterieanlage Unruhe zu herrschen. Daraufhin rief er uns zur Hilfe, um sich die Sache anzusehen und zu beraten. Wir kamen zu Besuch, betraten die Batterieanlage, und da waren... die Wände schwebten über dem Boden von drei Seiten. Kein Wunder: 4 Tonnen Batterien wurden einfach auf den Boden gestellt – und dieser begann sich nach unten zu senken. Das ist ein häufiges Problem mit Batterien: Es ist wichtig, die Last auf die Konstruktionen richtig zu berechnen und Entlastungsrahmen vorzusehen, damit die Decken nicht wie ein Kartenhaus zusammenbrechen.

Die Kirsche auf der Sahnetorte des architektonischen Albtraums in diesem Gebäude war das völlige Fehlen eines Fundaments. Die Wände standen einfach auf einer sandigen Estrichschicht, unter der sich kein besonders freundlicher Boden befand. Wir begannen zu überlegen, wie wir den Patienten retten könnten, und entschieden uns schließlich für ein komplexes Silikatisierungssystem: das ist, wenn der Boden an mehreren Stellen gebohrt wird und eine verstärkende Lösung eingepumpt wird. Das brachte den Boden nicht auf die ursprüngliche Höhe zurück, aber wenigstens hörte er auf, weiter abzusacken.

Der Kampf der beiden Yokozuna

In einem gewissen Königreich, in einem gewissen Büro-Staat, haben wir die Disposition organisiert: für das Rechenzentrum auf einer der Etagen, zur Klimakontrolle – für das gesamte Gebäude. Dutzende von Automatisierungsschränken, Kilometer von Datenkabeln!

Das Besondere an diesem Büro war ein hauseigenes SPA mit einer Sauna. Als wir das Projekt entwarfen, war vorgesehen, dass die Sauna nicht oft genutzt wird. Aber der Ingenieur plant, und der Auftraggeber verfügt: das Management-Team wurde so von einem gesunden Lebensstil begeistert, dass die Sauna vorsichtshalber gar nicht mehr abgeschaltet wurde – sie braucht zu lange zum Aufheizen.

Das Ergebnis: Die Automatisierung erkennt den Temperaturanstieg von der Sauna – schaltet die Klimaanlage stärker ein, um auszugleichen. Hilft nur mäßig. Die Klimaanlage kämpft weiter – die Atmosphäre heizt sich auf, weil die Automatisierung nicht ahnt, dass jemand so lange schwitzen kann. Die Klimaanlage gerät in Paranoia und denkt: „Es liegt nicht an ihnen, es liegt an mir. Alle Anstrengungen sind umsonst. Es scheint, ich bin defekt“, was sie dem Disponenten mitteilt. Der Disponent seufzt und drückt die Taste "Aufgabe abgebrochen". Und so geht es jeden Tag.

Mit einem leichten Handgriff

Es gibt noch viele Geschichten in unseren hinteren Lagerräumen, aber nicht alle passen hierher. Hier sind die letzten drei Erzählungen: über krumme Hände.

Die erste Geschichte handelt davon, wie wir in einem Gebäude neben der Serverräume die Luftzufuhr in die Aufzugslobbys und -schächte sicherstellten. Wir haben es gemacht, sind vom Objekt weggegangen, haben gewartet, bis ein anderer Auftragnehmer die Abschlussarbeiten beendet hat, und sind für die Systemtests zurückgekehrt. Wir starten die Luftzufuhr – und die abgehängte Decke bläht sich schnell auf, die Platten fallen mit Lärm zu Boden und alles verwandelt sich sofort in einen „Loft“-Stil. Es stellte sich heraus, dass die Jungs, die die Decke montiert hatten, vergessen hatten, die perforierten Platten für die Luft zu verwenden. Sie haben überhaupt nicht daran gedacht, einfach aus einer offenen Packung genommen – und das war's, die verpackten perforierten Platten nicht beachtet, den Plan nicht angesehen.

Die zweite Epik handelt ebenfalls von der Decke. In einem Rechenzentrum gab es einen ziemlich engen Flur, und der Luftwechsel im Raum mit den AKB-Regalen musste stark sein, daher liefen entlang der gesamten Decke die Leitungen. Die guten Burschen, die die abgehängte Decke machten, haben sich keine Gedanken gemacht und... haben die Aufhängeanker direkt in unsere armen Luftkanäle geschraubt. Jeder Luftkanal vibriert etwas, wenn die Ventilationseinrichtungen arbeiten, und wenn darin eine Menge Löcher und Unebenheiten sind, sind die Geräusche der Apokalypse vorprogrammiert. Wir haben den tapferen Monteuren damals so viele wohltuende Maulkörbe gegeben, dass die Wunden an den Luftkanälen auf wunderbare Weise verheilt sind. Natürlich auf deren Kosten.

Die dritte Geschichte geschah, als wir die Automatisierung für das System der technologischen Klimatisierung entwickelten. Wir übergaben dem Auftragnehmer des Kunden einen Temperatursensor und baten ohne Hintergedanken, ihn am Heizgerät in der Zuluft zu montieren. In Zuluftanlagen gibt es immer einen Heizkörper für die Außenluft: entweder wasserbasiert oder elektrisch. Dieser wunderbare Mensch hat alles ohne Widerrede gemacht. Das heißt, er nahm und schraubte eine Schraube direkt in das Rohr des wassserbasierten Heizkörpers, mit allen daraus (im wahrsten Sinne) resultierenden Folgen. Gut, dass auf dem Objekt Klimamonteure mit MAP-Gas waren – das Leck wurde schnell gelötet.