Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

I primi giorni d'estate sono perfetti per un viaggio di sviluppo a San Pietroburgo.
Visiteremo Miran, linxdatacenter, RETN e Metrotek.

5 del mattino, Stazione di Mosca, KFC, lungofiume di Moika, Piatto, piccioni dai tetti, Isakio, Campo di Marte, Captive yandexdrive, ed ecco Miran.

Miran

La nostra lab con Eva è già attiva a Miran da diversi anni, un server di streaming, un router virtuale MikroTik, l'hosting linkmeup con accesso IPv6 e ora anche hosting per podcast.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

All'ingresso di Miran ci ha accolto inizialmente un imponente gruppo elettrogeno.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

La maggior parte delle Unità Generator Diesel è montata su ruote per due motivi:

  • Mobilità — a poche centinaia di metri ci sono ulteriori moduli di Miran. Hanno i loro generatori — ma chi lo sa — potreste doverli spostare.
  • Mobilità — non devono essere registrati come centrali elettriche stazionarie e, di conseguenza, non è necessaria la documentazione progettuale.

Il gruppo elettrogeno di Miran si avvia in pochi secondi sia d'inverno che d'estate. Durante questo tempo, l'intero data center è alimentato da batterie.

E il server HP in rack di Miran e la visita sono stati resi possibili grazie a Fëdor Rusakov.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

L'intera visita si è svolta in un'atmosfera accogliente e familiare. Caffè e dolcetti, conversazioni sulle telecomunicazioni, sulle origini dell'azienda, sul trasporto di duecento server da Mosca a San Pietroburgo sotto il velo della notte. Con calma, abbiamo fatto una passeggiata tra i due edifici del Data Center. Entrambi — BrownField — riconvertiti da spazi industriali. Il primo, di proprietà di Miran, da cui abbiamo iniziato e dove ci siamo ricaricati al secondo piano dopo una visita di quattro ore a San Pietroburgo, un tempo ospitava una fabbrica di impianti diesel, davvero giganteschi impianti diesel. In effetti, non c'era un secondo piano — c'erano enormi porte per il transito. Tutto è stato smantellato, è stato creato un secondo piano, climatizzazione attiva, alimentazione elettrica ridondante, sistema di spegnimento a gas.

Un classico corridoio caldo, da cui l'aria è fornita ai condizionatori e sotto il pavimento tecnico nel corridoio freddo chiuso.

Anche sotto il pavimento tecnico sono nascosti i cavi di alimentazione.

Miran non è nata come una piattaforma per un singolo cliente ancorato, ma ha piuttosto sviluppato sistematicamente l'offerta in un mercato in cui c'è domanda.

Un tempo qui si trovava una grande banca con tutte le relative grate e sistemi di controllo accessi, ma ora si è trasferita.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

La domanda continuava a crescere, e anche Miran. È nato un secondo edificio, già in affitto, sempre BrownField, a duecento metri dal primo. La strada costeggia il lungofiume della Grande Neva, passando davanti alla casa di Nobel.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Il nuovo edificio è stato costruito seguendo un principio modulare, con la possibilità di trasferire un intero modulo in caso di problemi con il locatore. I primi due moduli sono stati acquistati dal produttore, il terzo è stato assemblato tenendo conto degli errori passati.

La architettura modulare ha qualche svantaggio: è relativamente stretta, il corridoio caldo è largo 60 cm, quindi due persone non possono passare. E, cosa più importante, il costo del trasferimento, come è emerso dal primo calcolo, è comparabile al costo della costruzione di un nuovo edificio.

Tuttavia, appaiono freschi e moderni sia all'esterno che all'interno.

Il NOC utilizza un Linux ortodosso, Debian stabile.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Il nome dell'azienda, tra l'altro, deriva dalla scheda Sistema Meridian Integrated Recorded Announcement (MIRAN) nel centralino Meridian. E così hanno chiamato anche il data center.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Hanno deciso di costruire il data center nell'anno difficile del 2008.

Da allora, i ragazzi forniscono server dedicati e un campanello. Nelle stanze speciali è stata installata l'attrezzatura degli operatori.

Questo comporta determinati limiti e peculiarità nel lavoro. Ad esempio, sono installati rack con attrezzature estremamente varie, sia per quanto riguarda i macchinari che per quanto riguarda la rete. A Mirana non ho visto altro che Arista e Mellanox. Ogni attrezzatura presenta diversi requisiti di temperatura nel corridoio freddo, quindi bisogna mantenerlo a un livello molto basso - circa 20 °C, il che significa che non si può parlare di un basso PUE - quello di Mirana è 1,5.
Un altro aspetto è legato agli adattamenti delle cavi nei rack. Non appena lasciate entrare esterni con le loro connessioni, scrivete pure "ha perso la bellezza". Nessuno ha eccezioni.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Purtroppo, introdurre misure draconiane qui può rivelarsi controproducente.

Passeggiate nei Data Center e nelle telecomunicazioni di San PietroburgoPasseggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo
Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo
Ultime foto.

E poi merch dal nostro tavolo al vostro e dal vostro al nostro. Ci siamo caricati tutti insieme in un taxi - e verso Linx.

linxdatacenter

Questi sono ragazzi seri, nel loro permesso temporaneo c'è persino scritto "Security Matters". Questo sarà il tema dell'intera visita.

Dopo la visita al Mirana, nel linxdatacenter capisci di essere arrivato in un data center di lusso. Durante il giorno libero, quattro persone si sono riunite, non proprio nel centro della città, per raccontare di sé a cinque altri che difficilmente diventeranno loro clienti 🙂.

Ci ha accolti Maria Svistunova, che ci ha condotti a un grande tavolo per le trattative. Qualche chiacchiera leggera davanti a un caffè guatemalteco e poi via.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Le visite guidate qui sono organizzate con efficienza. Maxim e Oleg conoscono il loro lavoro: raccontano in modo chiaro e appassionato. Dove serve, mettono l'accento, e dove non è necessario, lo evitano. Con un buon senso dell'umorismo, quindi, oltre due ore sono volate via senza che ce ne accorgessimo.

Il vanto del data center è un uptime del 100% fin dal lancio nel 2011.

La sicurezza è così alta che per i decimi non è previsto alcun spazio sul tabellone.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Linx è un esempio di data center in formato GreenField. L'edificio è stato progettato appositamente per ospitare un data center. Pertanto, l'altezza dei soffitti, la resistenza delle strutture portanti, l'alimentazione elettrica e la sua riserva, il cablaggio strutturato — tutto è stato previsto nel progetto e considerato già nella fase di costruzione.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Di default, un palo sopporta un carico di 800 kg, ma il peso può essere aumentato dopo un ulteriore consolidamento. Si dice che i pali oracle che costano come un Falcon9 richiedano un'attenzione particolare.

Il DC è alimentato da un'unità a gas e pistoni, mentre l'elettricità cittadina è solo un backup. Secondo Maxim, questa è stata una decisione molto saggia, perché durante il noto blackout di Pietroburgo, l'ufficio e il vicino BC hanno subito danni, mentre il DC ha continuato a funzionare.

Il generatore diesel qui non è più un rimorchio su ruote, ma una stanza stazionaria con camini che svettano nel paesaggio.

Il tempo di avvio è di massimo due minuti, e con le batterie l'intero DC può funzionare per circa un'ora. Il motore diesel può funzionare per 3 giorni senza rifornimento.

Qui regna l'ordine e la pianificazione.

Questo, ad esempio, è il keycard, dove i clienti del DC possono ritirare le chiavi delle loro rack semplicemente con l'impronta digitale.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

E questo è uno spazio dove i clienti possono effettuare qualsiasi lavoro ingegneristico necessario, per cui sulla parete è appeso un attrezzo da lavoro.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Queste sono scaffalature per l'uso locale con tutto il necessario per il lavoro quotidiano:

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

È sempre carico e pronto all'uso.

Il cappellino dell'aspirante rapper nella foto sopra ha salvato la testa di più di una persona. È rigido come un casco naturale — perfetto per esplorare sotto un pavimento falso di un metro e mezzo, dove può spuntare qualche pezzo di metallo affilato.

Ecco il personale operativo:

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Questo apparecchio del tutto insignificante è un manometro differenziale.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

È progettato per risolvere un compito semplice: mantenere la differenza di pressione tra il corridoio e la sala macchine. Ad esempio, per garantire che dentro ci sia una pressione leggermente più alta e, all'apertura della porta, la polvere non entri, ma al contrario venga respinta lontano dalla porta.

Il sistema antincendio è anche a gas: in caso di emergenza, il gas disloca l'ossigeno e spegne il fuoco.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Nel Link si presentano solo ragazzi seri e molto seri, che hanno motivi per avere paranoia come il Monte Ararat.

Le griglie e il sistema di controllo accessi separato dai data center sono solo l'inizio.

È interessante quando due persone arrivano per risolvere un problema o per nuove connessioni: una con una chiave fisica e l'altra con una chiave elettronica. Ma quando arriva un revisore del cliente con gli occhiali, scende sotto il pavimento tecnico, sposta due griglie e dice che ci passerà la testa di un bambino, capisci che quella persona ha vissuto alcune esperienze curiose nella sua vita.

Ci sono state situazioni divertenti in cui, progettando la gabbia, abbiamo considerato tutto ciò che era possibile: tutti i sistemi di sicurezza, tutte le dimensioni che permettono di portare il rack e installare l'attrezzatura, ma non abbiamo pensato alle dimensioni degli ingegneri che devono lavorare con esso. E non ci stanno né di profilo né di fronte tra la gabbia e il rack.

Se fossi il FSB, metterei il mio hardware in linx 🙂

Dopo la visita, siamo rimasti a chiacchierare ancora a lungo, godendoci una pizza.
Da questo regno di sicurezza e ordine, ci siamo diretti verso RETN.

RETN

Con questi ragazzi ci conosciamo da tempo e ci siamo avvicinati. Quindi non c'è da meravigliarsi che alla fine ci siamo riuniti sul loro tetto per grigliare e raccontare storie.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Lì siamo già stati, anche se sembra che non ne abbiamo mai parlato. Lo scorso anno, i piani di conquista dei tetti di Pietroburgo sono falliti a causa della FIFA.

RETN è in effetti il principale operatore di backbone con fibra in tutto il mondo. La loro rete farebbe invidia a qualsiasi ragno.

E il DC sulla circonvallazione è un progetto domestico per passione, che ha trovato la sua nicchia in un mercato in crescita. Qui si installano quelli che hanno bisogno di una connessione robusta con il mondo e di uscire verso altri operatori locali.

Ad esempio, in RETN c'è il CDN di Netflix.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Ho scoperto con sorpresa che ogni loro nodo è firmato a mano con una frase.
E queste festive scatole girano in diverse città nei POP di RETN (e ovviamente non solo i suoi), portando a voi i nuovi episodi di «Black Mirror» e «Peaky Blinders» il più velocemente possibile.

Qui ci sono anche il CDN di Google e una miriade di operatori, sia locali che federali.

Accanto all'edificio di RETN ci sono due piccoli (rispetto a quelli di Miranova) generatori diesel e un'auto con i bidoni, per andare a fare rifornimento. Sembra quasi un'attività familiare.

Le trattative serali sul tetto ci hanno portato a scoprire che RETN ci fornirà una virtual machine per la nostra piattaforma di backup per l'hosting di podcast e immagini.
Un data center super accogliente, con una rete che stupisce per le sue dimensioni.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Per alcuni, questo giorno si è concluso con un torneo di Duke Nukem, per altri con un tanto atteso sonno in hotel.

Il giorno dopo avevamo pochi piani: Metrotek e un podcast dal vivo — linkmeup IRL.

Metrotek

Solo un mese fa, i ragazzi del podcast telecom erano venuti a trovarci e Misha Sokolov e Denis Gabidullin della NTЦ Metrotek slash Plumspace, e abbiamo discusso di cosa sia lo Smart SFP. E ora abbiamo potuto toccarli dal vivo.

Denis, che ha guidato il tour nell'ufficio di Metrotek a San Pietroburgo (che, tra l'altro, non è cambiato dalla nostra ultima visita), ci ha dato subito uno dei campioni.
All'inizio sono rimasto sorpreso da quanto fosse grezzo — sembrava scolpito con un seghetto e una limetta da un chiavistello da 32.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Si è rivelato che il corpo del campione di prova era stampato in 3D con polvere metallica, il che si nota dalla superficie ruvida. Gli altri, quelli pronti per la produzione, sono in perfette condizioni.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Ma guardandoli, sorprende come siano riusciti a nascondere una così grande quantità di intelligenza in un corpo quasi standard.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Ti consiglio di ascoltare il podcast su Rosa, Toza e la loro sorella Boza.È stato interessante, a mio avviso.

Il design dell'ufficio è piuttosto convenzionale. Uffici rettangolari abbastanza piccoli, allungati verso la finestra, abbastanza bui, che potevano risultare un po' opprimenti. Ma nonostante fosse domenica, si respirava un'atmosfera lavorativa.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

La decorazione non è cambiata in due anni. Alcuni poster e lavagne erano piacevoli.

Abbiamo visitato diverse stanze: R&D, sistemisti, progettisti di FPGA, abbiamo avuto tra le mani vari tipi di SFP, programmatori, e abbiamo visto il primo modello in cui lo Smart era stato estratto dallo SFP tramite un cavo—uno dei primi esperimenti, più un Proof of Concept che dimostrava che funzionava.

Si dice che per alcuni clienti sia comodo avere una tail in ferro che sporge.
L'obiettivo principale due anni fa era assemblare una SFP ottica standard che almeno potesse trasmettere un segnale.

Poi abbiamo assemblato separatamente la parte Smart con una SFP di terzi (proprio con il cavo) per assicurarci che fossero in grado di combinare i chip.

Metrotek ha svolto un lavoro immenso. Basta pensare che in due anni hanno assemblato un modulo ottico completamente funzionante, capace di incapsulamento, telemetria, server di tempo preciso, e convertitore di interfacce.

E nel frattempo hanno perfezionato a un livello ottimale (anche se ciò dovrà essere verificato col tempo) la funzionalità di base per la trasmissione del segnale. Non devono esserci attenuazioni, neppure rari drop causati dal SFP. Inoltre, non deve surriscaldarsi, nonostante la presenza di numerosi ASIC, FPGA e CPU all'interno.
Bravo!

Un sistema di calcolo completo:

  • CPU: NXP i.MX6 ARM fino a 900 MHz
  • FPGA: Lattice ECP5 fino a 85K LUTs
  • RAM: DDR3 fino a 1 GB

Denis ha sottolineato che in azienda si promuove e incoraggia lo scambio di conoscenze e esperienze. E qui ho pensato: «Esiste forse qualcosa di diverso? 0_о». — Sì, spesso arrivano persone che nel loro precedente lavoro erano immerse nella propria realtà, non comunicavano, svolgevano lavoro duplicato o triplicato e in generale evitavano tentativi di comunicazione.

E qui ho ricordato che, in effetti, non più di due anni fa lavoravo in una grande azienda internazionale con molte limitazioni, dove le conferenze erano vietate e lo scambio di conoscenze non esisteva affatto. Ero uno degli evangelisti degli incontri settimanali per lo scambio di esperienze, che sembravano salvare gli ingegneri solitari nelle regioni remote.

In effetti, in Metrotec vengono regolarmente organizzati corsi di formazione e conferenze interne, ed è per questo che sono davvero bravi.

Poi ci hanno portato in un'incredibile officina di montaggio. Non importa quante volte ci vada, sembra che il mio entusiasmo infantile non svanisca mai.

In Metrotec, proprio in ufficio, c'è attrezzatura per la stampa su circuiti.

Uno stencil per applicare pallini di stagno, una stampante per componenti SMD (non so come definirla diversamente), un piccolo forno per la cottura delle schede e lì vicino postazioni di lavoro per il montaggio manuale.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Con mia sorpresa, ho scoperto che i microchip con centinaia di pin vengono anche saldati a mano. Denis dice che i loro ragazzi saldano i minutissimi dettagli con una precisione e una velocità sorprendenti, e a volte non ha senso accendere la macchina — una persona fa prima.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Tra di noi abbiamo ribattezzato la linea di produzione Metrotek Eltex-verilight, in seguito a una relativamente recente visita presso di loro.

Inoltre, l'ufficio dispone di una stampante 3D e un fresatore per scopi interni, sul quale abbiamo già inciso medaglie per lo scorso anno. Chaos Construction.

Passeggiate nei Data Center e nelle telecomunicazioni di San Pietroburgo

Da lì ci siamo diretti al sorprendente Krang Pizza, dove abbiamo gustato tutti insieme una pazzesca pizza-burger, sia per dimensioni che per significato, prima di spostarci all'ufficio di IQ option, dove abbiamo registrato il primo episodio. linkmeup IRL.

Il giorno dopo abbiamo anche visitato il Centro Laser su suggerimento di Mamont, dove abbiamo vissuto un'estasi tecnocratica e un attimo di avidità, ma di questo parleremo in un'altra storia.

In conclusione, ci tengo a dire che tutte le visite e gli incontri sono stati molto diversi, sia per scala che per indirizzo.

Miran, che ha ospitato il nostro hosting, è in rapida crescita, ma ancora amichevolmente semplice.

Links è davvero un centro dati eccezionale, con la sicurezza al primo posto e professionisti del marketing esperti.
RETN - giovani ragazzi divertenti "dai garage", che creano una rete gigantesca e al momento hanno un piccolo data center e non disdegnano di accendere un fuoco sul tetto.

Metrotek è un team relativamente piccolo di sviluppatori russi di hardware e software, che crea un bel po' di attrezzature di misurazione molto competitive con queste mani, e ora stanno entrando in un nuovo mercato con un'ambiziosa sfida.

E il Centro Laser, che va oltre gli interessi di linkmeup, ma è un'area di nostro personale interesse. Ha lasciato un'impressione molto positiva e un'incisione del microfono su un registratore.

Fonte: habr.com

Acquista un hosting affidabile per siti web con protezione DDoS, VPS VDS server 🔥 Acquista un hosting affidabile per siti web con protezione DDoS, VPS VDS server | ProHoster