Die ersten Sommertage eignen sich hervorragend für eine Entwicklungsreise nach Petersburg.
Wir werden Miran, linxdatacenter, RETN und Metrotek besuchen.

5 Uhr morgens, Moskauer Bahnhof, KFC, Ufer der Moika, Tellersymbol, Tauben auf den Dächern, Isaakskathedrale, Marsfeld, Capturing Yandex.Drive, und hier ist er - Miran.

Miran

Im Miran wohnen seit mehreren Jahren unser Labor mit Eva, ein Streaming-Server, virtueller MikroTik-RouterOS, Hosting linkmeup mit IPv6-Zugänglichkeit und jetzt auch Podcast-Hosting.

Am Eingang zu Miran wurden wir zunächst von einem imposanten Diesel-Generatorenaggregat empfangen.

Die meisten Diesel-Generatorenaggregate stehen aus zwei Gründen auf Rädern:

• Mobilität – in ein paar hundert Metern sind noch weitere Module von Miran. Sie haben ihre eigenen Generatoren – aber man weiß nie, vielleicht müssen wir sie bewegen.
• Mobilität – diese müssen nicht wie stationäre Kraftwerke registriert werden und benötigen daher keine Projektdokumentation.

Die Diesel-Generatorenaggregate von Miran starten im Winter und Sommer innerhalb von wenigen Sekunden. In dieser Zeit versorgen Batterien das gesamte Rechenzentrum mit Strom.

Und der HP-Server im Miran Rack sowie die Exkursion wurden dank Fjodor Rusakov möglich.

Die gesamte Tour fand in einer gemütlichen, familiären Atmosphäre statt. Kaffee mit Keksen, Gespräche über Telekommunikation, die Ursprünge des Unternehmens und den Transport von zweihundert Servern heimlich von Moskau nach St. Petersburg in der Nacht. Ohne Eile erkundeten wir die beiden Gebäude des Rechenzentrums. Beide sind Brownfield-Projekte, die aus ehemaligen Fabrikräumen umgebaut wurden. Im ersten, das Miran gehört und wo wir begonnen haben und uns nach einem vierstündigen Spaziergang durch St. Petersburg im zweiten Stock erholten, befand sich einst eine Fabrik für Dieselanlagen – wahrhaft gigantische Dieselanlagen. Tatsächlich gab es keinen zweiten Stock – nur riesige Tore, um hin und her zu fahren. Alles wurde abgerissen, der zweite Stock wurde gebaut, mit aktiver Kühlung, redundanter Stromversorgung und einer Gasanlage zur Brandbekämpfung.

Ein klassischer heißer Gang, von dem aus die Luft in die Klimaanlagen und unter dem Doppelboden in den geschlossenen kalten Gang geleitet wird.

Unter dem Doppelboden sind auch die Stromkabel versteckt.

Miran wurde nicht als Plattform für einen einzigen Hauptkunden gegründet, sondern hat vielmehr schrittweise das Angebot auf einem Markt entwickelt, wo Nachfrage besteht.

Zu seiner Zeit war hier eine große Bank mit allen entsprechenden Gitteranlagen und Zugangskontrollsystemen untergebracht, aber sie ist bereits ausgezogen.

Die Nachfrage wuchs weiter, auch Miran, es entstand ein zweites Gebäude – ebenfalls zur Miete – ebenfalls Brownfield – in zweihundert Metern Entfernung vom ersten. Der Weg führt entlang der Uferpromenade der Großen Newa vorbei am Nobel-Haus.

Das neue Gebäude wurde modulbauweise errichtet mit der Möglichkeit, ein ganzes Modul im Falle von Problemen mit dem Vermieter zu transportieren. Die ersten beiden Module wurden beim Hersteller gekauft, das dritte wurde bereits unter Berücksichtigung alter Fehler zusammengebaut.

Die modulare Architektur hatte auch Nachteile – sie sind vergleichsweise schmal – der heiße Flur – 60 cm – da können zwei Personen nicht aneinander vorbeigehen. Und das Wichtigste – die Umzugskosten, wie sich bereits bei der ersten Kalkulation herausstellte, sind mit den Kosten für den Bau eines Neuen vergleichbar.

Doch sie sehen sowohl außen als auch innen frisch und modern aus.

Das NOC der Jungs läuft auf einem stabilen Debian-basierten Linux.

Die Firma erhielt übrigens ihren Namen von der Meridian Integrated Recorded Announcement (MIRAN) Karte in dem Telefonschalter Meridian. Und daraufhin wurde auch das Rechenzentrum so genannt.

Das Rechenzentrum wurde im schwierigen Jahr 2008 beschlossen.

Seitdem bieten die Jungs dedizierte Server und Telekommunikationslösungen an. In speziellen Räumen ist die Ausrüstung der Betreiber installiert.

Und das bringt bestimmte Einschränkungen und Besonderheiten für den Betrieb mit sich. Zum Beispiel ist in den Racks eine maximal diverse Ausrüstung installiert, sowohl was die Maschinen als auch die Netzwerktechnik angeht. In Miran habe ich höchstens Arista und Mellanox nicht gesehen. Alle Geräte stellen unterschiedliche Anforderungen an die Temperatur im kalten Gang, daher muss diese sehr niedrig gehalten werden – etwa bei 20 °C, sodass von niedrigen PUE-Werten nicht die Rede sein kann – bei Miran beträgt er 1,5.
Ein weiterer Punkt sind die Kabelschlangen in den Racks. Sobald Sie externe Personen mit ihren Verbindungen in den Raum lassen, schreiben Sie das Wort „Schönheit“ ab. Für niemanden gibt es Ausnahmen.

Leider kann es sich als nachteilig erweisen, hier drakonische Maßnahmen einzuführen.

Letzte Fotos.

Und dann Merchandising von unserem Tisch zu Ihrem und von Ihrem zu unserem. Wir haben uns alle zusammen ins Taxi geladen – und ab zu Linx.

linxdatacenter

Das sind ernsthafte Jungs, auf ihrem temporären Ausweis steht sogar „Security Matters“. Das wird das Leitmotiv der gesamten Tour sein.

Nach dem Besuch des Linxdatacenters bekommst du ein Gefühl dafür, dass du in einem luxuriösen Rechenzentrum bist. An ihrem freien Tag kamen vier Personen zusammen, um ehrlich zu sein, nicht im Stadtzentrum, um sich anderen fünf Personen vorzustellen, die kaum ihre Kunden werden. 🙂

Maria Swistunowa empfing uns und führte uns zu einem großen Konferenztisch. Nach ein wenig zwanglosem Gespräch bei guatemaltekischem Kaffee ging es los.

Die Führungen hier laufen reibungslos. Maxim und Oleg wissen, was sie tun: Sie erzählen routiniert, klar und mit Leidenschaft. Wo nötig, setzen sie Akzente, und wo nicht, weichen sie elegant aus. Auch der Humor kommt nicht zu kurz, sodass die zweiundzwei Stunden wie im Flug vergingen.

Der Stolz des Rechenzentrums ist die 100%ige Betriebszeit seit der Eröffnung im Jahr 2011.

Das Vertrauen ist so hoch, dass nicht einmal Platz für Kommas auf der Anzeigetafel vorgesehen ist.

Linx ist ein Beispiel für ein Rechenzentrum im GreenField-Format. Das Gebäude wurde speziell für das Hosting eines Rechenzentrums konzipiert. Daher wurden Höhe der Decken, Tragfähigkeit der Decken sowie die Einspeisung der Stromversorgung, ihre Redundanz und die strukturierten Verkabelung bereits in der Planungsphase berücksichtigt.

Standardmäßig trägt das Rack 800 kg, aber das Gewicht kann nach zusätzlicher Verstärkung noch erhöht werden. Man sagt, die Oracle-Racks im Wert von Falcon9 erfordern besondere Aufmerksamkeit.

Das Rechenzentrum wird von einer Gas-Verbrennungsanlage gespeist, während der Strom aus dem städtischen Netz nur als Backup dient. Laut Maxim war dies eine sehr kluge Entscheidung, denn während des bekannten Stromausfalls in St. Petersburg litten das Büro und das angrenzende Geschäftsgebäude, während das Rechenzentrum weiterbetrieben wurde.

Der Dieselgenerator ist hier nicht mehr ein Anhänger auf Rädern, sondern ein festes Gebäude mit Schornsteinen, die hoch über die Landschaft hinausragen.

Die Startzeit beträgt nicht mehr als zwei Minuten, und mit den Batterien kann das gesamte Rechenzentrum etwa eine Stunde lang betrieben werden. Der Dieselgenerator kann drei Tage ohne Nachfüllen laufen.

Hier herrscht überall Ordnung und Planung.

Hier ist beispielsweise ein Schlüsselsystem, wo die Kunden des Rechenzentrums selbst ihre Schlüssel für die Racks mit ihrem Fingerabdruck holen können.

Und dies ist ein Raum, in dem Kunden alle benötigten technischen Arbeiten durchführen können, hierfür hängt Werkzeug an der Wand.

Das sind bereits Regale für den lokalen Betrieb mit allem, was für die tägliche Arbeit lebensnotwendig ist:

Es ist immer aufgeladen und bereit für den Einsatz.

Die Mütze eines angehenden Hip-Hoppers auf dem obigen Foto hat schon manchem das Leben gerettet. Sie ist so stabil wie ein Helm – perfekt, um sich unter dem eineinhalb Meter hohen Unterboden durchzuschlängeln, wo manchmal eine scharfe Metallkante herausragt.

Eigentlich sind das die Mitarbeiter aus dem Betrieb:

Dieses unscheinbare Gerät hier ist ein Differenzmanometer.

Es hat die einfache Aufgabe, den Druckunterschied zwischen dem Korridor und dem Maschinenraum aufrechtzuerhalten. Zum Beispiel damit es innen etwas höher ist und beim Öffnen der Tür der Staub nicht eindringt, sondern sich von der Tür wegbewegt.

Das Brandschutzsystem ist ebenfalls gasbetrieben – im Falle eines Notfalls verdrängt das Gas den Sauerstoff und erstickt das Feuer.

In der Linux-Welt kommen nur ernsthafte und sehr ernsthafte Leute zusammen, die Gründe für eine Paranoia in der Größenordnung des Ararat haben.

Gitter und separate Zutrittskontrollen außerhalb des Rechenzentrums sind nur der Anfang.

Es wird spannend, wenn zwei Personen zur Problemlösung oder für neue Verkabelungen anreisen — einer mit einem physischen Schlüssel, der andere mit einem elektronischen. Und wenn ein Auditor des Kunden in einer Brille kommt, unter den Doppelboden geht, zwei Gitterplatten beiseite schiebt und sagt, dass hier der Kopf eines Kindes hindurchpasst, versteht man, dass diese Person einige interessante Dinge in ihrem Leben gesehen hat.

Es gab lustige Situationen, als bei der Planung der Zelle alles berücksichtigt wurde, was nur möglich war: alle Sicherheitssysteme, alle Abmessungen, die es erlauben, ein Rack zu bringen und darauf Geräte zu installieren, aber irgendwie wurde nicht über die Maße der Ingenieure nachgedacht, die damit arbeiten werden. Und sie passen von keiner Seite zwischen der Zelle und dem Rack.

Wenn ich beim FSB wäre, würde ich meine Hardware in Linx platzieren 🙂

Nach der Besichtigung saßen wir noch eine ganze Weile zusammen und plauderten gemütlich bei Pizza.
Von diesem Reich der Sicherheit und Ordnung machten wir uns auf den Weg zu RETN.

RETN

Mit diesen Jungs sind wir schon lange und gut bekannt. Daher ist es nicht verwunderlich, dass wir uns endlich auf ihrem Dach versammelten, um Schaschlik zu grillen und Geschichten auszutauschen.

Wir waren dort auch schon, aber ich glaube, wir haben nicht davon erzählt. Letztes Jahr scheiterten die Pläne, die Dächer von St. Petersburg zu erobern, wegen der FIFA.

RETN ist tatsächlich der größte Betreiber von Hochgeschwindigkeits-Glasfasernetzwerken weltweit. Ihr Netzwerk lässt jeden Spinnen neidisch werden.

Das Rechenzentrum an der Umgehungsstraße ist ein Herzensprojekt, das seine Nische auf dem wachsenden Markt gefunden hat. Hier kommen diejenigen zusammen, die eine starke Anbindung zur Welt und Zugang zu anderen lokalen Anbietern benötigen.

So steht zum Beispiel das CDN von Netflix bei RETN.

Zu meiner Überraschung erfuhr ich, dass jede ihrer Nodes individuell mit einer kleinen Phrase von Hand beschriftet ist.
Diese festlichen kleinen Paketchen werden in verschiedenen Städten an den POPs von RETN (und offensichtlich nicht nur dort) geliefert, um Ihnen so schnell wie möglich "Black Mirror" und "Peaky Blinders" zu bringen.

Hier gibt es auch Googles CDN und zahlreiche Anbieter, sowohl lokal als auch auf Bundesebene.

Bei RETN stehen neben dem Gebäude zwei winzige (im Vergleich zu den Miran-Generatoren) Dieselgeneratoren und ein Fahrzeug mit Kanistern, um zur Tankstelle zu fahren. Klingt fast wie ein Familienunternehmen.

Die abendlichen Gespräche auf dem Dach haben uns zu dem Punkt geführt, an dem RETN uns eine virtuelle Maschine für die Backup-Plattform für das Hosting von Podcasts und Bildern bereitstellen wird.
Weltklasse, super chilliges Rechenzentrum, beeindruckendes Netzwerk in seiner Dimension.

Für den einen endete der Tag mit einem Duke Nukem-Turnier, für den anderen mit dem lange erwarteten Schlaf im Hotel.

Am nächsten Tag hatten wir nicht viele Pläne: Metrotek und den Podcast live — linkmeup IRL.

Metrotek

Vor genau einem Monat waren die Gäste des Telekom-Podcasts Misha Sokolov und Denis Gabidullin vom NTZ Metrotek bzw. Plumspace, und wir haben uns angeschaut, was Smart SFP ist. Nun konnten wir es live ansehen. Denis, der uns durch das Petersburger Büro von Metrotek führte (das sich, nebenbei bemerkt, seit unserem letzten Besuch nicht verändert hat), gab uns gleich am Eingang eines der Muster in die Hand.

Ich war zunächst überrascht, wie grob es gefertigt war — als wäre es mit einer Laubsäge und einer Feile aus einem 32er Schlüssel gefertigt.
Es stellte sich heraus, dass das Gehäuse des Prototyps auf einem 3D-Drucker aus Metallpulver gedruckt wurde, was man an der rauen Oberfläche erkennen kann. Die anderen — die für die Serienproduktion bereit sind — sind einwandfrei.

Es stellte sich heraus, dass das Gehäuse des Prototyps mit einem 3D-Drucker aus Metallpulver hergestellt wurde, was an der rauen Oberfläche zu erkennen ist. Die anderen — die für die Serienproduktion bereit sind — sind in einwandfreiem Zustand.

Wenn man sie betrachtet, fragt man sich, wie sie es geschafft haben, so viele intelligente Komponenten in ein fast standardisiertes Gehäuse zu integrieren.

Ich empfehle, zuzuhören dem Podcast über Rosa, Toza und ihre Schwester Boza.Nach meinem Geschmack war es interessant.

Das Bürokonzept ist sehr gewöhnlich. Relativ kleine, rechteckige Büros, die zum Fenster hin ausgerichtet sind, sind ziemlich dunkel, was etwas drückend wirkt. Doch trotz des Wochenendes herrschte eine arbeitsame Atmosphäre.

Die Einrichtung hat sich in zwei Jahren nicht verändert. Einige Plakate und Tafeln haben Freude bereitet.

Wir haben mehrere Räumen besucht: F&E, Systemspezialisten, FPGA-Entwickler, haben verschiedene Arten von SFP in den Händen gehalten, Programmierer gesehen und das erste Modell entdeckt, bei dem Smart vom SFP auf ein Kabel verlegt wurde – eines der ersten Experimente, eher ein Proof of Concept, dass es überhaupt funktioniert.

Es wird gesagt, dass es manchen Kunden sogar angenehm ist, wenn ein solcher „Schwanz“ aus dem Gerät herausragt.
Das allererste Ziel vor zwei Jahren war es, ein gewöhnliches optisches SFP zusammenzustellen, das zumindest das Signal überträgt.

Dann wurde separat der Smart-Teil mit einer anderen SFP (genau auf einem Kabel) zusammengestellt, um sicherzustellen, dass sie in der Lage sind, die Chips zu kombinieren.

MetroTekem hat eine enorme Arbeit geleistet. Man muss nur daran denken, dass innerhalb von 2 Jahren ein vollständig funktionierendes optisches Modul entwickelt wurde, das in der Lage ist, Kapselung, Telemetrie, einen Zeitserver und Schnittstellenkonverter zu unterstützen.

Und dabei wurde die grundlegende Funktionalität der Signalübertragung bis zur Perfektion optimiert (obwohl das noch auf die Probe gestellt werden muss). Es darf keine Dämpfungen geben, und es sollten selbst keine seltenen Drops durch SFP auftreten. Zudem sollte es trotz der Vielzahl von ASICs, FPGAs und CPUs im Inneren nicht überhitzen.
Bravo!

Vollwertiges Computersystem:

• CPU: NXP i.MX6 ARM bis zu 900 MHz
• FPGA: Lattice ECP5 bis zu 85K LUTs
• RAM: DDR3 bis zu 1 GB

Denis wies darauf hin, dass im Unternehmen der Austausch von Wissen und Erfahrung praktiziert und gefördert wird. Und da dachte ich: „Gibt es das denn anders? 0_о“. — Ja, oft kommen Menschen zu ihnen, die an ihrem vorherigen Arbeitsplatz in einer isolierten Umgebung gearbeitet haben, wenig kommuniziert haben und oft doppelte oder dreifache Arbeit verrichtet und insgesamt versucht haben, Kommunikationsversuche zu vermeiden.

Und da erinnerte ich mich, dass ich vor nicht einmal zwei Jahren in einem internationalen, stark eingeschränkten Unternehmen gearbeitet habe, wo Konferenzen verboten waren und der Wissensaustausch nicht stattfand. Ich war einer der Evangelisten für wöchentliche Meetings zum Erfahrungsaustausch, die anscheinend einsame Ingenieure in abgelegenen Regionen gerettet haben.

Im Allgemeinen werden bei MetroTec regelmäßig interne Schulungen und Vorträge abgehalten, was sie wirklich bemerkenswert macht.

Dann wurden wir in eine faszinierende Montagestation geführt. So oft ich auch dort war, mein kindlicher Enthusiasmus scheint nicht zu verblassen.

Bei MetroTec steht direkt im Büro eine Anlage zum Drucken auf Leiterplatten.

Ein Siebdruck für die Anwendung von Lötpunkte, ein SMD-Komponenten-Drucker (anders kann ich ihn einfach nicht nennen), ein kleines Gerät zum Aushärten der Leiterplatten und daneben Arbeitsplätze für die manuelle Montage.

Zu meinem Erstaunen erfuhr ich, dass Mikroprozessoren mit hunderten von Beinchen auch von Hand verlötet werden. Denis sagt, dass die Jungs die kleinsten Teile mit erstaunlicher Präzision und Geschwindigkeit anbringen und es manchmal keinen Sinn macht, die Maschine zu starten — ein Mensch ist schneller.

Wir haben unsere Produktionslinie Metrotek Eltex-Vereilight genannt, inspiriert von einem kürzlichen Besuch bei ihnen.

Außerdem gibt es im Büro einen 3D-Drucker und eine Fräsmaschine für interne Zwecke, mit der jedoch bereits Medaillen für die letztjährige Chaos Construction.

Von dort aus gingen wir zu dem beeindruckenden Krang Pizza, wo wir mit dem gesamten Team von linkmeup eine mutierte Pizza-Burger in Größen und Konzepten verschlungen haben, bevor wir ins Büro von IQ Option aufbrachen, wo wir die erste Episode aufgenommen haben. linkmeup IRL.

Am nächsten Tag schauten wir noch im Laserzentrum auf Anraten von Mammut vorbei, wo wir einen technokratischen Ekstase und ein wenig Gier erlebten, aber darüber wird es eine separate Geschichte geben.

Zusammenfassend lässt sich sagen, dass alle Exkursionen und Treffen sehr unterschiedlich waren, sowohl in Bezug auf den Umfang der Aktivitäten als auch auf die Ausrichtung.

Miran, der unser Hosting herzlich bei sich aufgenommen hat, ist ein schnell wachsendes, aber weiterhin freundliches Unternehmen.

Links ist wirklich ein großartiges Rechenzentrum, mit Sicherheit an erster Stelle und erfahrenen Marketingspezialisten.
RETN – junge, fröhliche Leute aus den Garagen, die ein riesiges Netzwerk aufbauen und derzeit ein kleines Rechenzentrum betreiben und nicht zögern, ein Feuerchen auf dem Dach zu machen.

Metrotek – ein relativ kleines Team von russischen Hardware- und Softwareentwicklern, das fast "mit diesen Händen" eine Menge anmessbarer und wettbewerbsfähiger Ausrüstung herstellt und nun in einen neuen Markt mit ehrgeizigen Zielen eintritt.

Und das Laserzentrum, das außerhalb der Interessen von linkmeup liegt, aber unser persönliches Interesse weckt. Es hinterließ einen sehr positiven Eindruck und eine Gravur des Mikrofons auf dem Diktiergerät.

Quelle: habr.com