Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Les premiers jours de l'été sont parfaits pour un voyage éducatif à Saint-Pétersbourg.
Nous visiterons Miran, linxdatacenter, RETN et Metrotek.

5 heures du matin, gare Moskovsky, KFC, quai Moika, Plate, pigeons sur les toits, Saint-Isaac, Champ de Mars, Yandex drive Capture, et le voici - Miran.

Miran

Notre laboratoire avec Eva, un serveur de diffusion, un Mikrotik Routeros virtuel, un hébergement linkmeup avec accessibilité IPv6, et maintenant un hébergement de podcast vivent à Mirana depuis plusieurs années maintenant.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

À l’entrée de Miran, nous avons d’abord été accueillis par une centrale diesel de taille impressionnante.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

La plupart des groupes électrogènes diesel sont sur roues pour deux raisons :

  • Mobilité - il y a plusieurs autres modules Mirana à quelques centaines de mètres. Ils ont leurs propres générateurs – mais on ne sait jamais – il faudra les rouler.
  • Mobilité - il n'est pas nécessaire de les enregistrer en tant que centrales électriques fixes et, par conséquent, aucune documentation de conception n'est nécessaire.

DGU Mirana en hiver et en été démarre dans quelques secondes. Pendant ce temps, l’ensemble du datacenter est alimenté par des batteries.

Les HP de fer dans la position de Miran et l'excursion sont devenus possibles grâce à Fedor Rusakov.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

L'ensemble de l'excursion s'est déroulé dans une atmosphère chaleureuse et familiale. Café avec des biscuits, une conversation sur les télécommunications, sur les origines de l'entreprise, sur le transport de deux cents serveurs Vkshechka de Moscou à Saint-Pétersbourg sous le couvert de l'obscurité. Nous avons parcouru tranquillement les deux bâtiments du centre de données. Les deux sont des conversions BrownField à partir de locaux d’usine. Dans la première, propriété de Miran, où nous avons commencé et où au deuxième étage nous avons rechargé après une promenade de quatre heures dans Saint-Pétersbourg, il y avait autrefois une usine d'unités diesel, de véritables unités diesel gigantesques. En fait, il n’y avait pas de deuxième étage – il y avait d’immenses portes pour aller et venir. Tout a été démonté, le deuxième étage a été construit, refroidissement actif, alimentation électrique redondante, système d'extinction d'incendie à gaz.

Une allée chaude classique, d'où l'air est fourni aux climatiseurs et sous un plancher surélevé dans une allée froide fermée.

Les câbles d'alimentation sont également cachés sous le plancher surélevé.

Miran n'est pas née comme une plateforme pour un client phare, mais a plutôt développé systématiquement son offre sur un marché où il existe une demande.

Il fut un temps où il y avait ici une grande banque dotée de tous les agents de sécurité et systèmes de contrôle d'accès nécessaires, mais elle a déjà déménagé.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

La demande a continué de croître, Miran aussi, un deuxième bâtiment est apparu - déjà à louer - également BrownField - à deux cents mètres du premier. La route longe le quai de Bolchaïa Nevka et passe devant la maison de Nobel.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Le nouveau bâtiment est construit sur un principe modulaire avec la possibilité de transporter l'ensemble du module en cas de problème avec le propriétaire. Les deux premières boites ont été achetées chez le constructeur, la troisième a déjà été assemblée en tenant compte d'anciennes erreurs.

L'architecture modulaire s'est avérée présenter des inconvénients - elles sont relativement étroites - le couloir chaud fait 60 cm - deux personnes ne peuvent pas se séparer. Et surtout, le coût du déménagement, comme il s'est avéré lors du premier calcul, est comparable à celui de la construction d'un nouveau.

Mais ils ont l’air frais et à la mode aussi bien à l’extérieur qu’à l’intérieur.

NOC pour les gars sous Linux orthodoxe, Debian stable.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Soit dit en passant, la société tire son nom de la carte du système MIRAN (Meridian Integrated Recorded Announcement) située dans le commutateur téléphonique Meridian. Et après cela, le centre de données s’appelait ainsi.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Ils ont décidé de construire le centre de données au cours de l'année difficile de 2008.

Depuis, les gars fournissent du dedik et de la cloche. L'équipement de l'opérateur est installé dans des locaux spéciaux.

Et cela impose certaines restrictions et particularités au travail. Les racks contiennent par exemple les équipements les plus variés, tant en termes de machines qu'en termes de mise en réseau. À Miran, je n’ai seulement pas vu Arista et Mellanox. Tous les équipements ont des exigences différentes en matière de température dans le couloir froid, ils doivent donc être maintenus à un niveau très bas - environ 20 ° C, c'est-à-dire qu'il n'est pas nécessaire de parler de PUE faible - Miran l'a 1,5.
Une autre nuance concerne les mariages de serpents dans les stands. Dès que vous laissez entrer dans la pièce des camarades extérieurs avec leurs relations, écrivez « la beauté est partie ». Personne n’a d’exception.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Hélas, introduire ici des mesures draconiennes pourrait être à votre détriment.

Promenades dans les centres de données et les télécommunications à Saint-PétersbourgPromenades dans les centres de données et les télécommunications à Saint-Pétersbourg
Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg
Dernières photos.

Et puis passez de notre table à la vôtre et de la vôtre à la nôtre. La foule entière s'est chargée dans les taxis et dans les liaisons.

centre de données linx

Ce sont des gars sérieux, dont le laissez-passer temporaire porte même la mention « Security Matters ». Ce sera le leitmotiv de toute l’excursion.

Après le Miran en pain d'épice chez linxdatacenter, vous comprenez qu'un DC de luxe est arrivé. Le jour de leur congé, 4 personnes se sont réunies, à vrai dire, pas en centre-ville pour parler d'elles à cinq autres personnes qui ne risquent pas de devenir leurs clients :)

Maria Svistunova nous a accueillis et nous a emmenés à une grande table de négociation. Une petite conversation autour d’un café guatémaltèque et c’est parti.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Des excursions sont en cours ici. Maxim et Oleg connaissent leur métier : ils le racontent comme ils le connaissent : clairement et avec passion. Si nécessaire, ils soulignent, et là où ce n'est pas le cas, ils contournent. Le sens de l'humour est également au rendez-vous, donc plus de deux heures sont passées inaperçues.

La fierté du data center, c'est une disponibilité à 100 % depuis son lancement en 2011.

La confiance est si élevée qu'il n'y a même pas de place pour les dixièmes au tableau d'affichage.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Linx est un exemple de DC au format GreenField. Le bâtiment a été spécialement construit pour abriter un DC. Ainsi, la hauteur des plafonds, la résistance des sols, les entrées d'alimentation électrique, leur redondance, SCS - ont été inclus dans le projet et pris en compte dès la phase de construction.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Ainsi, par défaut, le sol peut supporter un support de 800 kg, mais le poids peut encore être augmenté après un renforcement supplémentaire. Ils affirment que les racks Oracle coûtant Falcon9 nécessitent un traitement spécial.

Le courant continu lui-même est alimenté par une installation à piston à gaz et l'électricité de la ville n'est qu'une réserve. Selon Maxim, c'était une décision très correcte, car lors de la fameuse panne de courant de Saint-Pétersbourg, le bureau et le centre d'affaires voisin ont été endommagés, mais le centre de données a continué à fonctionner.

Le générateur diesel n'est plus ici une remorque sur roues, mais une pièce complètement stationnaire avec des cheminées s'élevant au-dessus du paysage.

Le temps de démarrage ne dépasse pas deux minutes et l'ensemble du centre de données peut fonctionner sur piles pendant environ une heure. Les moteurs diesel peuvent fonctionner pendant 3 jours sans faire le plein.

Il y a de l'ordre et de la prévenance dans tout ici.

Il s'agit par exemple de Klyuchintsa, où les clients du centre de données peuvent récupérer les clés de leurs racks grâce à leur empreinte digitale.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Et c'est une pièce où les clients peuvent effectuer tous les travaux d'ingénierie dont ils ont besoin, pour lesquels un outil de tranchée est accroché au mur.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Ce sont déjà des étagères à usage local avec tout ce qui est indispensable au travail quotidien :

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Il est toujours chargé et prêt à fonctionner.

La casquette de baseball de l'aspirant hiphopeur sur la photo ci-dessus a sauvé la tête de plus d'une personne. C'est aussi dur qu'un casque naturel - la meilleure chose à faire est de grimper sous un plancher surélevé d'un mètre et demi, où, non, non, un morceau de fer pointu dépasse.

En réalité les salariés de l'exploitation :

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Cet appareil banal est un manomètre différentiel.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Il est conçu pour résoudre un problème simple : maintenir la différence de pression entre le couloir et la salle des machines. Par exemple, pour qu'il soit un peu plus haut à l'intérieur et que lorsque la porte est ouverte, la poussière ne vole pas à l'intérieur, mais s'éloigne de la porte.

Le système d'extinction d'incendie est également à gaz - en cas de problème, le gaz déplace l'oxygène et arrête la combustion.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Seuls les gars sérieux et très sérieux qui ont des raisons de paranoïa de la taille d'Ararat se trouvent dans les liens.

Les grilles et un système de contrôle d'accès séparé du centre de données ne sont qu'un début.

Lorsque deux personnes viennent résoudre un problème ou établir de nouvelles connexions - l'une avec une clé matérielle, l'autre avec une clé électronique - cela devient plus intéressant. Et quand un auditeur à lunettes arrive chez un client, descend sous le plancher surélevé, démonte deux feuilles de barreaux et dit que la tête d'un enfant passera par ici, on comprend que cette personne a vu des choses intéressantes dans sa vie.

Il y a eu des situations amusantes où, lors de la conception d'une cage, ils ont pris en compte tout ce qui était possible, tous les systèmes de sécurité, toutes les dimensions qui permettent d'importer un rack et d'y mettre du matériel, mais d'une manière ou d'une autre, ils n'ont pas pensé aux dimensions de les ingénieurs qui travailleraient avec. Mais ils ne s’insèrent entre la cage et le support ni de face ni de profil.

Si j'étais le FSB, j'installerais mon matériel sous Linux :)

Après l'excursion, nous sommes restés assis assez longtemps, discutant chaleureusement autour d'une pizza.
De ce domaine de sécurité et d’ordre, nous sommes passés à RETN.

RETN

Nous connaissons ces gars de près depuis longtemps. Il n’est donc pas surprenant que nous nous soyons finalement réunis sur leur toit pour faire un barbecue et raconter des histoires.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Nous y sommes également allés auparavant, même si je ne pense pas que nous vous en ayons parlé. L’année dernière, les projets visant à s’emparer des toits de Saint-Pétersbourg ont échoué à cause de la Fifa.

RETN est en fait le plus grand opérateur de fibre optique sur toute la planète. Leur toile fera l’envie de n’importe quelle araignée.

Et le DC sur Obvodny est un projet de maison pour l'âme qui a trouvé sa niche sur un marché en croissance. C’est là qu’interviennent ceux qui ont besoin d’une forte connectivité avec le monde et d’un accès à d’autres opérateurs locaux.

Par exemple, RETN contient le CDN de Netflix.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

J'ai été surpris d'apprendre que chacun de leurs nœuds était signé individuellement à la main avec une phrase.
Et ces coffrets de fêtes sont battus dans différentes villes sur les POP de RETN (et, évidemment, pas seulement), vous livrant « Black Mirror » et « Peaky Blinders » le plus rapidement possible.

Il existe également le CDN de Google et de nombreux opérateurs, locaux et fédéraux.

RETN dispose de deux petits générateurs diesel (par rapport à celui de Miranov) et d'une voiture avec des bidons pour se rendre à une station-service à côté du bâtiment. Cela ressemble presque à une entreprise familiale.

Eh bien, les négociations du soir sur le toit nous ont amenés au point que RETN nous offrirait une boîte virtuelle pour un site de sauvegarde pour l'hébergement de podcasts et d'images.
Les gars du monde, un centre de données super-lampe, un réseau qui surprend par son ampleur.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Pour certains, cette journée s'est terminée par un tournoi de duke nukem, pour d'autres par un sommeil tant attendu à l'hôtel.

Le lendemain, nous n'avions pas beaucoup de projets : Metrotek et le podcast en direct - lienmeup IRL.

Métrotek

Il y a à peine un mois, nous avons visité un podcast sur les télécommunications venu Misha Sokolov et Denis Gabidullin de STC Metrotek slash Plumspace, et nous avons discuté de ce qu'est Smart SFP. Et maintenant, nous avons pu les toucher vivants.

Denis, qui a visité le bureau de Metrotek à Saint-Pétersbourg (qui d'ailleurs n'a pas changé depuis notre dernière visite), a en fait remis l'un des échantillons dès le pas de la porte.
Au début, j'ai été surpris de voir à quel point il était grossièrement fabriqué - comme s'il avait été découpé dans une clé de 32 mm avec une scie sauteuse et une lime.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Il s’est avéré que le corps du prototype avait été imprimé en 3D à partir de poudre métallique, comme le montre la surface rugueuse. D'autres - ceux qui sont prêts pour la série - sont en parfait état.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Mais en général, en les regardant, on est étonné de voir à quel point ils ont réussi à cacher autant de cerveaux dans un boîtier presque standard.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

je te conseille d'écouter podcast sur Rosa, Tozu et leur sœur Boza. Cela s'est avéré intéressant à mon goût.

La conception du bureau est aussi ordinaire que possible. Les bureaux rectangulaires relativement petits, tendus vers la fenêtre, sont assez sombres, ce qui était un peu oppressant. Mais l'ambiance, malgré le jour de congé, était celle du travail.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Le design n'a pas changé depuis deux ans. J'ai été satisfait de certaines affiches et panneaux.

Nous avons parcouru plusieurs salles : R&D, ingénieurs système, spécialistes FPGA, avons tenu entre nos mains différents types de SFP, des programmeurs, avons vu le premier modèle dans lequel Smart a été retiré du SFP sur un fil - une des premières expériences - plutôt, un Preuve de concept que cela fonctionne.

On dit que certains clients trouvent même pratique qu'une telle queue dépasse de leur fer.
Il y a deux ans, le tout premier objectif était d'assembler un SFP optique classique capable de transmettre au moins un signal.

Ensuite, ils ont assemblé séparément la partie Smart avec le SFP de quelqu'un d'autre (juste sur le cordon) pour s'assurer qu'ils étaient capables d'assembler les puces.

Metrotek a fait un excellent travail. Pensez simplement qu'en 2 ans, ils ont assemblé un module optique entièrement fonctionnel capable d'encapsuler la télémétrie, un serveur de temps exact et un convertisseur d'interface.

Et en même temps, déboguez à la perfection (même si cela reste à tester avec le temps) les fonctionnalités de base pour la transmission du signal. Il ne devrait y avoir aucune atténuation, il ne devrait même pas y avoir de rares chutes dues à la faute du SFP. Et il ne devrait pas faire chaud, malgré le pack d’ASIC, FPGA et CPU à l’intérieur.
Bravo!

Système informatique complet :

  • Processeur : NXP i.MX6 ARM jusqu'à 900 MHz
  • FPGA : treillis ECP5 jusqu'à 85 XNUMX LUT
  • RAM : DDR3 jusqu'à 1 Go

Denis a souligné que l'entreprise pratique et encourage l'échange de connaissances et d'expériences. Et puis j’ai pensé : « Peut-il vraiment en être autrement ? 0_o". — Oui, viennent souvent vers eux des gens qui, sur leur ancien lieu de travail, mijotaient dans leur propre jus, ne communiquaient pas, faisaient un double et triple travail et évitaient généralement les tentatives de communication.

Et puis je me suis souvenu qu'en général, il y a à peine deux ans, je travaillais dans une entreprise internationale largement interdite, où les conférences étaient interdites et où l'échange de connaissances était absent en tant que cours. Et j'étais l'un des évangélistes des réunions d'échange hebdomadaires qui semblaient sauver les ingénieurs solitaires des régions reculées.

En général, Metrotek organise régulièrement des formations et des conférences internes, c'est pourquoi elles sont excellentes.

Et puis nous avons été emmenés dans un incroyable atelier d’installation. Peu importe le nombre de fois que je leur rends visite, il semble que mon plaisir d'enfance ne s'efface pas.

Metrotek dispose d'équipements pour imprimer sur des circuits imprimés directement au bureau.

Un pochoir pour appliquer des pastilles de soudure, une imprimante pour les composants CMS (je ne peux tout simplement pas l'appeler autrement), un petit poêle pour cuire les circuits imprimés et des postes de travail à proximité pour une installation manuelle.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

À ma grande surprise, j'ai appris que les puces électroniques dotées de centaines de pattes sont également soudées à la main. Denis dit que leurs gars soudent les plus petites pièces avec une précision et une rapidité incroyables, et parfois cela ne sert à rien de faire fonctionner la machine shaitan - une personne le fera plus rapidement.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

Nous avons nommé entre nous la ligne de production Metrotek Eltex-Verilight, à la suite d'une excursion relativement récente chez eux.

De plus, le bureau dispose d'une imprimante 3D et d'une fraiseuse pour les besoins internes, qui ont cependant déjà été utilisées pour graver des médailles l'année dernière. Construction chaotique.

Promenades dans les centres de données et les télécommunications à Saint-Pétersbourg

De là, nous sommes allés à Krang Pizza, étonnant par son contenu idéologique, où toute l'équipe de Linkmeup a avalé une pizza burger mutante en taille et en sens et a déménagé au bureau d'options IQ, où nous avons enregistré le premier épisode. lienmeup IRL.

Le lendemain, nous avons également visité le Laser Center sur une astuce de Mammoth, où nous avons connu une extase technocratique et une petite inflammation de cupidité, mais ce sera une autre histoire.

En conclusion, je voudrais dire que toutes les excursions et réunions se sont révélées très différentes, tant en termes d'ampleur que d'orientation.

Miran, qui a hébergé notre hébergement avec hospitalité, connaît une croissance rapide, mais reste toujours convivial et simple.

Links est un centre de données vraiment cool, avec la sécurité au premier plan et des spécialistes du marketing expérimentés.
RETN sont des gars jeunes et joyeux « des garages » qui construisent un réseau géant et un centre de données encore petit et qui n'hésitent pas à allumer un feu sur le toit.

Metrotek est une équipe relativement petite de développeurs russes de matériel et de logiciels, qui fabriquent presque « de leurs propres mains » un tas d'équipements de mesure plus que compétitifs et qui entrent maintenant sur un nouveau marché avec une tâche ambitieuse.

Et le Laser Center, qui dépasse les intérêts de linkmeup, mais est l'objet de nos intérêts personnels. J'ai laissé une impression très agréable ainsi que la gravure du microphone sur l'enregistreur.

Source: habr.com

Ajouter un commentaire