Die ersten Tage des Sommers eignen sich hervorragend für eine lehrreiche Reise nach St. Petersburg.
Wir werden Miran, linxdatacenter, RETN und Metrotek besuchen.

5 Uhr morgens, Bahnhof Moskau, KFC, Ufer der Moika, Teller, Tauben auf den Dächern, Isaakskathedrale, Marsfeld, Captur von Yandex.Drive, und da ist er – Miran.

Miran

In Miran lebt seit mehreren Jahren unser Labor mit Eva, der Streaming-Server, einem virtuellen MikroTik-RouterOS, dem Hosting linkmeup mit IPv6-Verfügbarkeit und nun auch dem Podcast-Hosting.

Am Eingang zu Miran wurden wir zunächst von einem beeindruckend großen Dieselgenerator empfangen.

Die meisten Dieselgeneratoren sind aus zwei Gründen auf Rädern:

• Mobilität – in ein paar hundert Metern gibt es noch einige Module von Miran. Sie haben eigene Generatoren – aber man weiß ja nie – man muss sie vielleicht bewegen.
• Mobilität – sie müssen nicht wie stationäre Kraftwerke registriert werden und daher ist keine Projektplanung erforderlich.

Der Dieselgenerator von Miran startet im Winter und Sommer innerhalb weniger Sekunden. Während dieser Zeit versorgen Batterien das gesamte Rechenzentrum mit Strom.

Der metallene HP im Rack von Miran und die Führung wurden dank Fjodor Rusakow möglich.

Die gesamte Führung fand in einer gemütlichen, familiären Atmosphäre statt. Kaffee mit Keksen, Gespräche über Telekommunikation, die Ursprünge des Unternehmens, über den Transport von zweihundert Servern unter dem Deckmantel der Nacht von Moskau nach St. Petersburg. Ohne Eile spazierten wir durch zwei Gebäude des Rechenzentrums. Beide sind BrownField – umgebaut aus ehemaligen Fabrikräumen. Im ersten, das Miran gehört, von dem wir anfingen und in dem wir uns im zweiten Stock nach einem vierstündigen Spaziergang durch St. Petersburg erholten, befand sich einst eine Fabrik für dieselbetriebenen Anlagen, wahrhaft gigantische dieselbetriebene Anlagen. Tatsächlich gab es keinen zweiten Stock – es gab riesige Tore, um hinein- und herauszukommen. Alles wurde abgerissen, der zweite Stock wurde gemacht, aktive Kühlung, redundante Stromversorgung, Gasanlage zur Brandbekämpfung.

Ein klassischer heißer Gang, von dem die Luft in die Klimaanlagen und unter dem Doppelboden in den geschlossenen kalten Gang geleitet wird.

Auch die Stromkabel sind im Doppelboden verborgen.

Miran wurde nicht als Standort für einen einzigen Anker-Kunden gegründet, sondern hat systematisch das Angebot auf dem Markt entwickelt, wo es Nachfrage gibt.

Einst befand sich hier eine große Bank mit all den erforderlichen Gittern und Zugangskontrollsystemen, aber sie ist bereits ausgezogen.

Die Nachfrage blieb stark, ebenso wie Miran, und es gab ein zweites Gebäude — bereits zur Miete — auch BrownField — nur zweihundert Meter vom ersten entfernt. Der Weg führt entlang der Uferpromenade der Großen Newa vorbei am Nobelhaus.

Das neue Gebäude wurde modular errichtet, mit der Möglichkeit, das gesamte Modul im Falle von Problemen mit dem Vermieter zu verlagern. Die ersten beiden Container wurden vom Hersteller gekauft, der dritte wurde unter Berücksichtigung früherer Fehler zusammengebaut.

Die modulare Architektur hat jedoch ihre Nachteile — sie sind vergleichsweise schmal — der heiße Gang beträgt 60 cm — zwei Personen können sich nicht begegnen. Und vor allem — die Umzugskosten waren, wie sich bei der ersten Berechnung herausstellte, vergleichbar mit den Kosten für den Bau eines neuen.

Aber sie sehen sowohl von außen als auch von innen frisch und modern aus.

Das NOC der Jungs läuft auf orthodoxem Linux, einem stabilen Debian.

Übrigens erhielt das Unternehmen seinen Namen von der Systemplatine Meridian Integrated Recorded Announcement (MIRAN) im Telefonwechsel Meridian. Und folglich wurde auch das Rechenzentrum so benannt.

Das Rechenzentrum wurde im schwierigen Jahr 2008 beschlossen.

Seitdem bieten die Jungs dedizierte Server und einen High-Availability-Dienst an. In speziellen Räumlichkeiten ist die Ausrüstung der Betreiber installiert.

Und das bringt bestimmte Einschränkungen und Besonderheiten in die Arbeit ein. Zum Beispiel sind in den Racks maximal unterschiedlichste Geräte installiert, sowohl in Bezug auf die Maschinen als auch in Bezug auf die Netzwerkinfrastruktur. In Miran habe ich höchstens Arista und Mellanox nicht gesehen. Alle Geräte haben unterschiedliche Anforderungen an die Temperatur im kalten Gang, weshalb sie auf einem sehr niedrigen Niveau gehalten werden müssen — etwa 20 °C, das heißt, über niedrige PUE kann man nicht sprechen — bei Miran liegt er bei 1,5.
Ein weiterer Punkt sind die rauchenden Hochzeiten in den Racks. Sobald Sie externe Leute mit ihren Verkabelungen in den Raum lassen, schreiben Sie 'Schönheit verloren'. Niemand hat da Ausnahmen.

Leider kann es sich als schädlich erweisen, hier drakonische Maßnahmen zu ergreifen.

Die letzten Fotos.

Und dann Merch von unserem Tisch zu eurem und von eurem zu unserem. Wir luden uns alle in ein Taxi — und in den Linx.

linxdatacenter

Das sind ernsthafte Jungs, auf den temporären Ausweisen von denen steht sogar 'Security Matters'. Das wird der rote Faden der gesamten Führung sein.

Nach dem süßen Miran im linxdatacenter versteht man, dass man ein Luxushosting-Center betreten hat. An ihrem freien Tag kamen vier Leute, um ehrlich zu sein, nicht ins Stadtzentrum, um sich den anderen fünf, die kaum ihre Kunden werden, vorzustellen 🙂

Maria Swistunowa begrüßte uns und führte uns zu einem großen Konferenztisch. Ein bisschen lockere Gespräche bei guatemaltekischem Kaffee und los geht's.

Die Exkursionen hier sind standardisiert. Maxim und Oleg wissen, was sie tun: Sie erzählen routiniert, klar und mit Leidenschaft. Wo nötig, setzen sie Akzente, wo nicht, gehen sie elegant vorbei. Auch der Humor ist in vollem Umfang vorhanden, sodass zwei Stunden wie im Flug vergangen sind.

Der Stolz des Rechenzentrums ist die Uptime von 100% seit der Inbetriebnahme im Jahr 2011.

Das Vertrauen ist so groß, dass für Zehntel-Anteile kein Platz auf der Anzeige vorgesehen ist.

Linx ist ein Beispiel für ein Rechenzentrum im GreenField-Format. Das Gebäude wurde speziell für den Betrieb eines Rechenzentrums konzipiert. Daher wurden die Deckenhöhe, die Tragfähigkeit der Decken, die Stromversorgung, ihre Redundanz und die strukturierte Verkabelung in das Projekt integriert und bereits während des Bauprozesses berücksichtigt.

Standardmäßig hält der Boden 800 kg pro Rack aus, aber das Gewicht kann nach zusätzlicher Verstärkung erhöht werden. Es wird gesagt, dass die Oracle-Racks, die so viel wie Falcon9 kosten, besondere Anforderungen stellen.

Das Rechenzentrum wird von einer Gas-Verbrennungskraftmaschine gespeist, während der städtische Strom nur als Reserve dient. Laut Maxim war das eine sehr richtige Entscheidung, denn während des bekannten Stromausfalls in St. Petersburg litten das Büro und das benachbarte Bürogebäude, während das Rechenzentrum weiterarbeitete.

Der Dieselgenerator ist hier bereits kein Anhänger mehr, sondern ein stationäres Gebäude mit Schornsteinen, die hoch über die Landschaft aufragen.

Die Startzeit beträgt nicht mehr als zwei Minuten, und im Akkubetrieb kann das gesamte Rechenzentrum etwa eine Stunde arbeiten. Die Diesel können drei Tage lang ohne Nachfüllung betrieben werden.

Hier herrschen Ordnung und Durchdachtheit.

Hier ist beispielsweise ein Schlüsselraum, in dem die Kunden des Rechenzentrums selbst mit ihrem Fingerabdruck die Schlüssel zu ihren Racks abholen können.

Und hier ist ein Raum, in dem Kunden alle erforderlichen Ingenieurarbeiten erledigen können, wobei an der Wand Werkzeug hängt.

Das sind bereits Regale für den lokalen Betrieb mit allem Lebensnotwendigen für die tägliche Arbeit:

Es ist immer geladen und bereit für den Einsatz.

Die Baseballmütze des aufstrebenden Hip-Hoppers auf dem obigen Foto hat schon manch einem das Leben gerettet. Sie ist stabil wie ein echter Helm – ideal, um unter dem 1,5 Meter hohen Fußboden zu kriechen, wo hin und wieder ein scharfes Metallstück herausragt.

Das sind die Mitarbeiter aus dem Betrieb:

Dieses unscheinbare Gerät ist ein Differenzmanometer.

Es soll eine einfache Aufgabe lösen: den Druckunterschied zwischen dem Flur und dem Maschinenraum aufrechtzuerhalten. Zum Beispiel, um sicherzustellen, dass es innen etwas höher ist und beim Öffnen der Tür der Staub nicht hineinfliegt, sondern von der Tür wegfliegt.

Das Brandschutzsystem ist ebenfalls gasbetrieben – im Notfall verdrängt das Gas den Sauerstoff und unterbindet die Flamme.

In Linx gibt es nur ernsthafte und sehr ernsthafte Typen, die Gründe für eine Größenparanoia wie den Ararat haben.

Gitter und eine separate Zugangskontrolle vom Rechenzentrum – das ist nur der Anfang.

Wenn zwei Personen zur Problemlösung oder für neue Verbindungen kommen – eine mit einem materiellen Schlüssel, die andere mit einem elektronischen – wird es schon interessanter. Wenn dann ein Auditor vom Kunden mit Brille kommt, unter den Hohlboden geht, zwei Gitterblätter zur Seite schiebt und sagt, dass hier der Kopf eines Kindes durchpasst, versteht man, dass die Person in ihrem Leben einige interessante Dinge gesehen hat.

Es gab amüsante Situationen, wenn bei der Planung des Geheges alles berücksichtigt wurde, was man nur kann, alle Sicherheitssysteme und alle Maße, die es ermöglichen, ein Rack hinein zu bringen und Geräte zu installieren, aber irgendwie wurde nicht über die Abmessungen der Ingenieure nachgedacht, die mit ihm arbeiten. Und sie passen weder im Profil noch frontal zwischen Gehege und Rack.

Wenn ich die FSB wäre, würde ich meine Hardware in Linx stellen 🙂

Nach der Tour haben wir noch ziemlich lange gesessen und gemütlich bei Pizza geplaudert.
Aus diesem Reich der Sicherheit und Ordnung sind wir zu RETN übergegangen.

RETN

Mit diesen Leuten sind wir schon lange gut bekannt. Daher ist es nicht verwunderlich, dass wir endlich auf ihrem Dach versammelt sind, um Spieße zu grillen und Geschichten zu erzählen.

Dort waren wir auch schon, obwohl wir, glaube ich, nicht darüber berichtet haben. Letztes Jahr scheiterten die Pläne zur Eroberung der Dächer in Petersburg wegen der FIFA.

RETN ist übrigens der größte Fernverkehrsoperator mit Glasfaser weltweit. Ihr Netz wird von jedem Spinnenkitz bewundert.

Das Rechenzentrum an der Umgehungsstraße ist ein Projekt für die Seele, das seine Nische auf dem wachsenden Markt gefunden hat. Hier sind diejenigen untergebracht, die eine starke Verbindung zur Welt und zu anderen lokalen Anbietern benötigen.

So steht zum Beispiel bei RETN das CDN von Netflix.

Ich war überrascht zu erfahren, dass jeder ihrer Knoten individuell mit einem bestimmten Satz handschriftlich signiert ist.
Und solche festlichen Boxen werden in verschiedenen Städten bei POPs RETN (und offenbar nicht nur dort) zusammengestellt, um Ihnen «Schwarzes Spiegel» und «Peaky Blinders» so schnell wie möglich zu liefern.

Hier gibt es auch Googles CDN und eine Menge Betreiber, sowohl auf lokaler als auch auf bundesweiter Ebene.

Bei RETN stehen neben dem Gebäude zwei winzige (im Vergleich zu den Miranov-Generatoren) Dieselgeneratoren und ein Wagen mit Kanistern, um zur Tankstelle zu fahren. Das klingt fast wie ein Familienunternehmen.

Die Abendverhandlungen auf dem Dach führten dazu, dass RETN uns eine virtuelle Maschine für die Backup-Plattform zum Hosting von Podcasts und Bildern zur Verfügung stellen wird.
Globale Jungs, super gemütliches Rechenzentrum, ein Netzwerk, das in seinen Ausmaßen beeindruckt.

Für manchen endete dieser Tag mit einem Turnier in Duke Nukem, für andere mit dem lang erwarteten Schlaf im Hotel.

Am nächsten Tag hatten wir nicht viel geplant: Metrotek und der Podcast live — linkmeup IRL.

Metrotek

Vor genau einem Monat waren wir zu Gast beim Telekom-Podcast, wo Misha Sokolov und Denis Gabidullin von NTC Metrotek slash Plumspace zu uns kamen, und wir haben erörtert, was Smart SFP ist. Und jetzt konnten wir sie live anfassen. Denis, der die Führung durch das St. Petersburger Büro von Metrotek übernahm (das, nebenbei bemerkt, sich seit unserem letzten Besuch dort nicht verändert hat), gab uns gleich am Eingang ein Muster in die Hände.

Ich war zuerst überrascht, wie grob es gemacht war — als wäre es mit einer Laubsäge und einer Feile aus einem 32-er Schlüssel herausgearbeitet.
Es stellte sich heraus, dass das Gehäuse des Prototyps aus Metallpulver im 3D-Druck hergestellt wurde, was an der rauen Oberfläche sichtbar ist. Die anderen — die, die bereit für die Serie sind — sind in einwandfreiem Zustand.

Aber insgesamt, wenn man sie betrachtet, ist man erstaunt, wie sie es geschafft haben, in ein nahezu standardmäßiges Gehäuse so viele Intelligenz zu verstecken.

Ich empfehle, den Podcast über Rosa, Toza und ihre Schwester Boza zu hören.

Es war für meinen Geschmack interessant geworden. Das Design des Büros ist maximal gewöhnlich. Relativ kleine, rechteckige Büros, die zum Fenster hin ausgezogen sind, sind recht dunkel, was etwas drückend war. Aber trotz des Wochenendes herrschte eine Arbeitsatmosphäre.Die Gestaltung hat sich in zwei Jahren nicht geändert. Einige Plakate und Tafeln haben mich erfreut.

Die Gestaltung hat sich in zwei Jahren nicht verändert. Einige Plakate und Tafeln haben mich erfreut.

Das Büro-Design hat sich in zwei Jahren nicht verändert. Einige Plakate und Tafeln haben mich erfreut.

Wir haben einige Räume besucht: R&D, Systemtechniker, FPGA-Entwickler, haben verschiedene Arten von SFP in der Hand gehalten, Programmiergeräte gesehen, und das erste Modell gesehen, bei dem Smart aus dem SFP auf einem Kabel herausgeführt wurde – eines der ersten Experimente – eher ein Proof of Concept, dass es überhaupt funktioniert.

Es wird gesagt, dass es einigen Kunden sogar angenehm ist, wenn solch ein Schwänzchen aus dem Metallgehäuse heraushängt.
Das erste Ziel vor zwei Jahren war, ein einfaches optisches SFP zu entwickeln, das wenigstens ein Signal übertragen kann.

Dann hat man separat den Smart-Teil mit fremdem SFP (gerade auf einem Kabel) zusammengestellt, um sicherzustellen, dass sie in der Lage sind, die Chips zu kombinieren.

Metrotek hat eine enorme Arbeit geleistet. Man kann sich kaum vorstellen, dass sie in zwei Jahren ein vollständig funktionierendes optisches Modul entwickelt haben, das In-Kapselung, Telemetrie, einen Zeitservers und Schnittstellenkonverter beherrscht.

Und dabei auch die grundlegende Funktionalität für die Signalübertragung bis zur Perfektion optimiert haben (obwohl das noch durch die Zeit überprüft werden muss). Es sollte keine Dämpfungen geben, und es sollten nicht einmal seltene Drops durch das SFP auftreten. Außerdem sollte es nicht überhitzen, trotz einer Menge ASICs, FPGAs und CPUs im Inneren.
Bravo!

Vollwertiges Rechenzentrum:

• CPU: NXP i.MX6 ARM bis 900 MHz
• FPGA: Lattice ECP5 bis 85K LUTs
• RAM: DDR3 bis 1 GB

Denis bemerkte, dass im Unternehmen der Wissensaustausch und Erfahrungsaustausch praktiziert und gefördert wird. Und da habe ich gedacht: 'Gibt es das etwa anders? 0_о'. - Ja, häufig kommen Menschen zu ihnen, die an ihrem vorherigen Arbeitsplatz nur im eigenen Saft gegart haben, nicht kommunizierten, doppelte und dreifache Arbeiten erledigten und im Allgemeinen versuchten, Kommunikation zu vermeiden.

Und da erinnerte ich mich, dass ich vor nicht einmal zwei Jahren in einem internationalen Unternehmen arbeitete, das auf breiter Front gesperrt war, wo Konferenzen verboten waren und der Wissensaustausch als solcher nicht existierte. Und ich war einer der Evangelisten wöchentlicher Treffen zum Erfahrungsaustausch, die anscheinend einsame Ingenieure in abgelegenen Regionen retteten.

Im Allgemeinen finden bei Metrotek regelmäßig interne Schulungen und Vorträge statt, weshalb sie großartig sind.

Dann wurden wir in eine erstaunliche Montagewerkstatt geführt. So oft ich auch dort war, scheint meine kindliche Begeisterung nicht zu erlöschen.

Bei Metrotek steht direkt im Büro die Ausrüstung zum Drucken auf Leiterplatten.

Eine Schablone zum Auftragen von Lötzinn, ein SMD-Komponenten-Drucker (anders kann ich es einfach nicht nennen), ein kleiner Ofen zum Backen von Leiterplatten und daneben Arbeitsplätze für die manuelle Montage.

Zu meinem Erstaunen erfuhr ich, dass Mikrochips mit Hunderten von Beinen ebenfalls von Hand gelötet werden. Denis sagt, dass die Jungs dort die kleinsten Teile mit erstaunlicher Präzision und Geschwindigkeit anlöten und es manchmal keinen Sinn macht, die Maschinen zu starten - ein Mensch macht es schneller.

Intern nannten wir die Produktionslinie Metrotek Eltex-Verilight, angeregt von einem relativ kürzlichen Besuch bei ihnen.

Darüber hinaus gibt es im Büro einen 3D-Drucker und eine Fräse für interne Bedürfnisse, mit der sie bereits Medaillen für die letztjährige Chaos Construction.

Von dort aus gingen wir in das beeindruckende Krang Pizza, wo wir mit der kompletten linkmeup-Truppe die mutierte Pizza-Burger, sowohl in der Größe als auch im Sinne, verschlangen und zum Büro von IQ Option aufbrachen, wo wir die erste Episode aufnahmen. linkmeup IRL.

Am nächsten Tag schauten wir noch im Laserzentrum vorbei auf den Tipp von Mammut, wo wir eine technokratische Ekstase und ein wenig Gier erlebten, aber das wird eine eigene Geschichte sein.

Abschließend möchte ich sagen, dass alle Exkursionen und Treffen sehr unterschiedlich waren, sowohl in Bezug auf das Ausmaß als auch auf die Ausrichtung.

Miran, der unser Hosting gastfreundlich bei sich aufgenommen hat, ist schnell wachsend, aber immer noch freundlich einfach.

Links ist wahrhaftig ein cooler Rechenzentrum, mit Sicherheit an erster Stelle und erfahrenen Vermarktern.
RETN - junge, fröhliche Leute „aus Garagen“, die ein riesiges Netzwerk aufbauen und derzeit ein kleines Rechenzentrum haben und nicht abgeneigt sind, ein kleines Feuerchen auf dem Dach zu machen.

Metrotek ist ein vergleichsweise kleines Team russischer Hardware- und Softwareentwickler, das fast „mit diesen Händen“ einen Stapel von mehr als wettbewerbsfähigen Messgeräten herstellt und nun auf einen neuen Markt mit einer ehrgeizigen Aufgabe vordringt.

Und das Laserzentrum, das über die Interessen von linkmeup hinausgeht, aber von persönlichem Interesse für uns ist. Hinterließ einen sehr angenehmen Eindruck und eine Gravur eines Mikrofons auf dem Diktiergerät.

Quelle: habr.com