Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Die ersten Sommertage eignen sich hervorragend für eine Bildungsreise nach St. Petersburg.
Wir werden Miran, linxdatacenter, RETN und Metrotek besuchen.

5 Uhr morgens, Moskauer Bahnhof, KFC, Moika-Damm, Plate, Tauben von den Dächern, St. Isaac's, Marsfeld, Yandex Drive Capture, und hier ist es – Miran.

Miran

Unser Labor mit Eva, einem Broadcast-Server, einem virtuellen Mikrotik-Router, Linkmeup-Hosting mit IPv6-Zugänglichkeit und nun auch Podcast-Hosting leben seit mehreren Jahren in Mirana.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Am Ortseingang von Miran wurden wir zunächst von einer beeindruckend großen Dieselgeneratoranlage begrüßt.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Die meisten Dieselaggregate sind aus zwei Gründen auf Rädern:

  • Mobilität – ein paar hundert Meter entfernt gibt es mehrere weitere Mirana-Module. Sie haben ihre eigenen Generatoren – aber man weiß nie – man muss sie rollen lassen.
  • Mobilität – sie müssen nicht als stationäre Kraftwerke registriert werden und dementsprechend ist keine Konstruktionsdokumentation erforderlich.

DGU Mirana im Winter und Sommer startet in wenigen Sekunden. Während dieser Zeit wird das gesamte Rechenzentrum mit Batterien betrieben.

Sowohl die eiserne HP in Mirans Haltung als auch der Ausflug wurden dank Fedor Rusakov möglich.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Der gesamte Ausflug fand in gemütlicher, familiärer Atmosphäre statt. Kaffee mit Keksen, ein Gespräch über Telekommunikation, über die Ursprünge des Unternehmens, über den Transport von zweihundert Vkshechka-Servern von Moskau nach St. Petersburg im Schutz der Dunkelheit. Wir gingen gemütlich durch die beiden Rechenzentrumsgebäude. Bei beiden handelt es sich um BrownField-Umbauten von Fabrikgeländen. Im ersten, Eigentum von Miran, wo wir angefangen haben und im zweiten Stock nach einem vierstündigen Spaziergang durch St. Petersburg neue Kraft schöpften, gab es einst eine Fabrik für Dieselaggregate, wirklich gigantische Dieselaggregate. Eigentlich gab es keinen zweiten Stock – es gab riesige Tore, durch die man hin und her gehen konnte. Alles wurde abgebaut, das zweite Obergeschoss gebaut, aktive Kühlung, redundante Stromversorgung, Gas-Feuerlöschanlage.

Ein klassischer Warmgang, von dem aus die Luft an Klimaanlagen und unter einem Doppelboden in einen geschlossenen Kaltgang geleitet wird.

Auch die Stromkabel sind unter dem Doppelboden versteckt.

Miran wurde nicht als Plattform für einen Ankerkunden geboren, sondern entwickelte sein Angebot systematisch in einem Markt, in dem Nachfrage besteht.

Früher gab es hier eine große Bank mit allen notwendigen Sicherheitskräften und Zutrittskontrollsystemen, die jedoch bereits ausgezogen ist.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Die Nachfrage wuchs weiter, auch Miran, ein zweites Gebäude erschien – bereits zu vermieten – ebenfalls BrownField – zweihundert Meter vom ersten entfernt. Die Straße verläuft entlang des Bolschaja-Newka-Damms, vorbei an Nobels Haus.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Der Neubau ist nach einem Modulprinzip aufgebaut und bietet die Möglichkeit, bei Problemen mit dem Vermieter das gesamte Modul zu transportieren. Die ersten beiden Kartons wurden vom Hersteller gekauft, der dritte war bereits unter Berücksichtigung alter Fehler zusammengebaut.

Es stellte sich heraus, dass die modulare Architektur Nachteile hatte – sie ist relativ schmal – der heiße Korridor beträgt 60 cm – zwei Personen können sich nicht trennen. Und das Wichtigste: Die Kosten für einen Umzug sind, wie sich bei der ersten Berechnung herausstellte, vergleichbar mit einem Neubau.

Aber sie sehen sowohl außen als auch innen frisch und modisch aus.

NOC für die Jungs unter orthodoxem Linux, stabilem Debian.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Das Unternehmen erhielt seinen Namen übrigens von der MIRAN-Systemplatine (Meridian Integrated Recorded Announcement) in der Meridian-Telefonvermittlung. Und danach wurde das Rechenzentrum so genannt.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Sie beschlossen, das Rechenzentrum im schwierigen Jahr 2008 zu bauen.

Seitdem sorgen die Jungs für Dedik und Bell. Die Bediengeräte werden in speziellen Räumen installiert.

Und dies erlegt der Arbeit gewisse Einschränkungen und Besonderheiten auf. Beispielsweise sind in den Racks unterschiedlichste Geräte untergebracht, sowohl was Maschinen als auch was die Vernetzung betrifft. In Miran habe ich nur Arista und Mellanox nicht gesehen. Alle Geräte haben unterschiedliche Anforderungen an die Temperatur im Kaltkorridor, daher muss diese auf einem sehr niedrigen Niveau gehalten werden – etwa 20 °C, d.h. von einem niedrigen PUE muss nicht gesprochen werden – Miran hat 1,5.
Eine weitere Nuance sind Schlangenhochzeiten auf Ständen. Sobald Sie externe Kameraden mit ihren Verbindungen in den Raum lassen, schreiben Sie „Die Schönheit ist weg.“ Niemand hat Ausnahmen.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Leider kann die Einführung drakonischer Maßnahmen hier zu Ihrem Nachteil sein.

Spaziergänge durch Rechenzentren und Telekommunikation in St. PetersburgSpaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg
Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg
Neusten Fotos.

Und dann Merch von unserem Tisch zu Deinem und von Deinem zu unserem. Die ganze Menge lud in Taxis und in Links.

linxdatacenter

Das sind ernsthafte Typen, auf deren vorläufigem Pass sogar „Security Matters“ steht. Dies wird das Leitmotiv der gesamten Exkursion sein.

Nach dem Lebkuchen-Miran bei Linxdatacenter verstehen Sie, dass ein Luxus-DC angekommen ist. An ihrem freien Tag kamen vier Leute zusammen, ehrlich gesagt nicht im Stadtzentrum, um den anderen fünf Leuten von sich zu erzählen, die wahrscheinlich nicht ihre Kunden werden :)

Maria Svistunova empfing uns und führte uns an einen großen Verhandlungstisch. Ein wenig müßiges Gespräch bei guatemaltekischem Kaffee und dann geht es los.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Ausflüge finden hier statt. Maxim und Oleg kennen sich aus: Sie erzählen es so, wie sie es wissen: klar und mit Leidenschaft. Wo es nötig ist, betonen sie, wo nicht, umgehen sie. Auch der Sinn für Humor ist in Ordnung, sodass mehr als zwei Stunden unbemerkt vergingen.

Der Stolz des Rechenzentrums ist die 100-prozentige Betriebszeit seit seiner Einführung im Jahr 2011.

Das Selbstvertrauen ist so groß, dass es nicht einmal für Zehntel einen Platz auf der Anzeigetafel gibt.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Linx ist ein Beispiel für einen DC im GreenField-Format. Das Gebäude wurde speziell für die Unterbringung eines DC gebaut. Daher wurden die Höhe der Decken, die Stärke der Böden, die Stromversorgungseingänge, ihre Redundanz, SCS – in das Projekt einbezogen und in der Bauphase berücksichtigt.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Standardmäßig hält der Boden also einer Belastung von 800 kg stand, das Gewicht kann jedoch nach zusätzlicher Verstärkung noch weiter erhöht werden. Sie sagen, dass Oracle-Racks, die Falcon9 kosten, einer Sonderbehandlung bedürfen.

Der Gleichstrom selbst wird von einer Gaskolbenanlage angetrieben, und Stadtstrom ist nur eine Reserve. Laut Maxim war dies eine sehr richtige Entscheidung, denn während des berühmten Stromausfalls in St. Petersburg wurden das Büro und das nahegelegene Geschäftszentrum beschädigt, das Rechenzentrum funktionierte jedoch weiter.

Der Dieselgenerator ist hier kein Anhänger auf Rädern mehr, sondern ein völlig stationärer Raum mit hoch über der Landschaft ragenden Schornsteinen.

Die Startzeit beträgt nicht mehr als zwei Minuten und das gesamte Rechenzentrum kann etwa eine Stunde lang mit Batterien betrieben werden. Dieselmotoren können 3 Tage lang ohne Auftanken betrieben werden.

Hier herrscht Ordnung und Nachdenklichkeit in allem.

Dies ist zum Beispiel Klyuchintsa, wo Kunden von Rechenzentren mithilfe ihres Fingerabdrucks die Schlüssel zu ihren Racks erhalten können.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Und dies ist ein Raum, in dem Kunden alle erforderlichen Ingenieurarbeiten durchführen können, wofür ein Schanzwerkzeug an der Wand hängt.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Das sind bereits Regale für den lokalen Gebrauch mit allem, was für die tägliche Arbeit wichtig ist:

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Es ist immer aufgeladen und einsatzbereit.

Die Baseballkappe des aufstrebenden Hiphoppers auf dem Foto oben rettete mehr als einer Person den Kopf. Es ist so hart wie ein Naturhelm – am besten klettert man unter einen anderthalb Meter hohen Doppelboden, aus dem, nein, nein, irgendein scharfes Stück Eisen herausragt.

Eigentlich Mitarbeiter aus dem Betrieb:

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Bei diesem unauffälligen Gerät handelt es sich um ein Differenzdruckmessgerät.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Es wurde entwickelt, um ein einfaches Problem zu lösen – die Druckdifferenz zwischen dem Korridor und dem Maschinenraum aufrechtzuerhalten. Damit es zum Beispiel innen etwas höher ist und beim Öffnen der Tür kein Staub nach innen fliegt, sondern von der Tür wegfliegt.

Auch die Feuerlöschanlage ist gasbetrieben – im Störungsfall verdrängt das Gas den Sauerstoff und stoppt die Verbrennung.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

In den Links stehen nur ernsthafte und sehr ernsthafte Leute, die Gründe für Paranoia haben, die so groß sind wie Ararat.

Gitter und ein vom Rechenzentrum getrenntes Zugangskontrollsystem sind nur der Anfang.

Wenn zwei Menschen zusammenkommen, um ein Problem zu lösen oder neue Verbindungen herzustellen – einer mit einem materiellen Schlüssel, der andere mit einem elektronischen – wird das interessanter. Und wenn ein bebrillter Prüfer von einem Klienten kommt, unter den Doppelboden geht, zwei Gitterstäbe auseinanderzieht und sagt, dass der Kopf eines Kindes hier hindurchpasst, verstehen Sie, dass die Person in ihrem Leben einige interessante Dinge gesehen hat.

Es gab komische Situationen, in denen bei der Gestaltung eines Käfigs alles Mögliche berücksichtigt wurde, alle Sicherheitssysteme, alle Abmessungen, die es ermöglichen, ein Rack zu importieren und Geräte darin unterzubringen, aber irgendwie haben sie nicht an die Abmessungen gedacht die Ingenieure, die damit arbeiten würden. Sie passen aber weder vorne noch im Profil zwischen Käfig und Ständer.

Wenn ich der FSB wäre, würde ich meine Hardware in Linx installieren :)

Nach dem Ausflug saßen wir noch lange da und unterhielten uns bei einer Pizza.
Aus diesem Bereich der Sicherheit und Ordnung zogen wir nach RETN.

RETN

Wir kennen diese Jungs schon lange gut. Daher ist es nicht verwunderlich, dass wir uns schließlich auf ihrem Dach versammelten, um zu grillen und Geschichten zu erzählen.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Wir waren auch schon einmal dort, obwohl wir Ihnen, glaube ich, nichts davon erzählt haben. Im vergangenen Jahr scheiterten Pläne, die Dächer von St. Petersburg zu besetzen, an der Fifa.

RETN ist tatsächlich der weltweit größte Backbone-Betreiber mit Glasfaser. Ihr Netz wird jede Spinne beneiden.

Und das DC on Obvodny ist ein Heimprojekt für die Seele, das seine Nische in einem wachsenden Markt gefunden hat. Hier kommen diejenigen ins Spiel, die eine starke Konnektivität mit der Welt und Zugang zu anderen lokalen Betreibern benötigen.

RETN enthält beispielsweise das CDN von Netflix.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Ich war überrascht, als ich erfuhr, dass jeder ihrer Knoten einzeln mit einem Satz handsigniert war.
Und diese Feiertagsboxen werden in verschiedenen Städten auf den POPs von RETN (und natürlich nicht nur dort) verprügelt, um Ihnen „Black Mirror“ und „Peaky Blinders“ so schnell wie möglich zu liefern.

Es gibt auch das CDN von Google und eine Reihe lokaler und bundesstaatlicher Betreiber.

RETN verfügt über zwei (im Vergleich zu Miranovs) winzige Dieselgeneratoren und ein Auto mit Kanistern, um zu einer Tankstelle neben dem Gebäude zu fahren. Klingt fast wie ein Familienunternehmen.

Nun, die abendlichen Verhandlungen auf dem Dach brachten uns zu dem Punkt, dass RETN uns eine virtuelle Box als Backup-Site zum Hosten von Podcasts und Bildern zur Verfügung stellen würde.
Weltmenschen, ein Superlampen-Rechenzentrum, ein Netzwerk, das mit seiner Größe verblüfft.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Für einige endete dieser Tag mit einem Duke-Nukem-Turnier, für andere mit einer lang ersehnten Übernachtung im Hotel.

Am nächsten Tag hatten wir nicht viel vor: Metrotek und der Podcast live – linkmeup IRL.

Metrotek

Erst vor einem Monat haben wir einen Telekom-Podcast besucht sind gekommen Misha Sokolov und Denis Gabidullin von STC Metrotek haben Plumspace gekürzt und wir haben darüber gesprochen, was Smart SFP ist. Und jetzt konnten wir sie lebendig berühren.

Denis, der einen Rundgang durch das St. Petersburger Büro von Metrotek gab (das sich übrigens seit unserem letzten Besuch dort nicht verändert hat), überreichte tatsächlich eines der Muster direkt von der Tür aus.
Zuerst war ich überrascht, wie grob es gefertigt war – als wäre es mit einer Stichsäge und einer Feile aus einem 32-mm-Schraubenschlüssel herausgeschnitzt worden.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Es stellte sich heraus, dass die Karosserie des Prototyps aus Metallpulver 3D-gedruckt war, was an der rauen Oberfläche zu erkennen ist. Andere – diejenigen, die für die Serie bereit sind – sind in bester Ordnung.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Aber im Allgemeinen ist man beim Betrachten erstaunt darüber, wie sie es immer noch geschafft haben, so viele Gehirne in einem fast normalen Fall zu verbergen.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Ich rate Ihnen, zuzuhören Podcast über Rosa, Tozu und ihre Schwester Boza. Für meinen Geschmack ist es interessant geworden.

Die Bürogestaltung ist so gewöhnlich wie möglich. Die relativ kleinen rechteckigen Büros, die sich zum Fenster hin erstrecken, sind ziemlich dunkel, was etwas bedrückend wirkte. Aber die Atmosphäre war trotz des freien Tages arbeitsmäßig.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Das Design hat sich in zwei Jahren nicht verändert. Ich war mit einigen Postern und Tafeln zufrieden.

Wir gingen durch mehrere Räume: Forschung und Entwicklung, Systemingenieure, FPGA-Spezialisten, hielten verschiedene Arten von SFP in unseren Händen, Programmierer, sahen das erste Modell, bei dem Smart über ein Kabel vom SFP entfernt wurde – eines der ersten Experimente – oder besser gesagt ein Proof of Concept, dass es überhaupt funktioniert.

Sie sagen, dass einige Kunden es sogar praktisch finden, wenn ein solcher Schwanz aus ihrem Eisen herausragt.
Das allererste Ziel vor zwei Jahren bestand darin, einen regulären optischen SFP zusammenzubauen, der zumindest ein Signal übertragen würde.

Dann haben sie das Smart-Teil separat mit dem SFP eines anderen zusammengebaut (nur am Kabel), um sicherzustellen, dass sie die Chips zusammenbauen konnten.

Metrotek hat großartige Arbeit geleistet. Denken Sie nur daran, dass sie in zwei Jahren ein voll funktionsfähiges optisches Modul zusammengebaut haben, das Telemetrie, einen genauen Zeitserver und einen Schnittstellenkonverter kapseln kann.

Und gleichzeitig die Grundfunktionalität für die Signalübertragung bis zur Perfektion debuggen (obwohl dies mit der Zeit noch getestet werden muss). Es sollte keine Dämpfung auftreten, es sollte nicht einmal zu seltenen Ausfällen durch SFP-Fehler kommen. Und es sollte trotz der vielen ASICs, FPGAs und CPUs im Inneren nicht heiß werden.
Bravo!

Komplettes Computersystem:

  • CPU: NXP i.MX6 ARM bis zu 900 MHz
  • FPGA: Lattice ECP5 bis zu 85 LUTs
  • RAM: DDR3 bis zu 1 GB

Denis wies darauf hin, dass das Unternehmen den Wissens- und Erfahrungsaustausch praktiziert und fördert. Und dann dachte ich: „Kann es wirklich anders sein?“ 0_o.“ — Ja, oft kommen Menschen zu ihnen, die an ihrem bisherigen Arbeitsplatz in ihren eigenen Säften schmorten, nicht kommunizierten, Doppel- und Dreifacharbeit leisteten und Kommunikationsversuche generell vermieden.

Und dann erinnerte ich mich daran, dass ich im Allgemeinen vor nicht mehr als zwei Jahren in einem internationalen, weithin verbotenen Unternehmen gearbeitet habe, in dem Konferenzen verboten waren und der Wissensaustausch in der Klasse fehlte. Und ich war einer der Befürworter der wöchentlichen Austauschtreffen, die einsame Ingenieure in abgelegenen Regionen zu retten schienen.

Generell führt Metrotek regelmäßig interne Schulungen und Vorträge durch, weshalb diese großartig sind.

Und dann wurden wir zu einer tollen Installationswerkstatt geführt. Egal wie oft ich sie besuche, es scheint, dass meine Kindheitsfreude nicht verblasst.

Metrotek verfügt über Geräte zum Bedrucken von Leiterplatten direkt im Büro.

Eine Schablone zum Auftragen von Lotkörnern, ein Drucker für SMD-Bauteile (ich kann es einfach nicht anders nennen), ein kleiner Herd zum Backen von Leiterplatten und nahegelegene Arbeitsplätze für den manuellen Einbau.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Zu meiner Überraschung erfuhr ich, dass Mikrochips mit Hunderten von Beinen auch von Hand gelötet werden. Denis sagt, dass ihre Leute die kleinsten Teile mit erstaunlicher Genauigkeit und Geschwindigkeit löten, und manchmal hat es keinen Sinn, die Shaitan-Maschine zu bedienen – eine Person wird es schneller machen.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Wir haben die Produktionslinie unter uns Metrotek Eltex-Verilight genannt, nach einem relativ kürzlichen Ausflug dorthin.

Darüber hinaus verfügt das Büro über einen 3D-Drucker und eine Fräsmaschine für den internen Bedarf, die jedoch bereits im letzten Jahr zum Gravieren von Medaillen genutzt wurde Chaos-Konstruktion.

Spaziergänge durch Rechenzentren und Telekommunikation in St. Petersburg

Von dort aus gingen wir zu Krang Pizza, das in seinem ideologischen Inhalt erstaunlich ist, wo das gesamte Linkmeup-Team einen Pizzaburger verschluckte, der sowohl in der Größe als auch in der Bedeutung mutiert war, und zum Büro von IQ Option zogen, wo wir die erste Episode aufnahmen linkmeup IRL.

Am nächsten Tag schauten wir uns auf einen Hinweis von Mammoth hin auch im Laser Center um, wo wir technokratische Ekstase und eine kleine Entzündung der Gier erlebten, aber das wird eine andere Geschichte sein.

Abschließend möchte ich sagen, dass sich alle Exkursionen und Treffen sowohl im Aktionsumfang als auch im Schwerpunkt als sehr unterschiedlich herausstellten.

Miran, der unsere Gastgeber gastfreundlich bewirtet hat, wächst schnell, ist aber immer noch freundlich und unkompliziert.

Links ist ein wirklich cooles Rechenzentrum, bei dem die Sicherheit im Vordergrund steht und erfahrene Vermarkter tätig sind.
RETN sind junge, fröhliche Kerle „aus der Garage“, die ein riesiges Netzwerk und ein noch kleines Rechenzentrum aufbauen und nicht davor zurückschrecken, ein Feuer auf dem Dach zu machen.

Metrotek ist ein relativ kleines Team russischer Hardware- und Softwareentwickler, das fast „mit diesen Händen“ einen Haufen mehr als wettbewerbsfähiger Messgeräte herstellt und nun mit einer ehrgeizigen Aufgabe in einen neuen Markt vordringt.

Und das Laserzentrum, das über die Interessen von linkmeup hinausgeht, sondern Gegenstand unserer persönlichen Interessen ist. Einen sehr angenehmen Eindruck hinterließ bei mir auch die Gravur des Mikrofons auf dem Recorder.

Source: habr.com

Kommentar hinzufügen