I primi giorni dell'estate sono perfetti per un viaggio formativo a Pietroburgo.
Visiteremo Miran, linxdatacenter, RETN e Metrotek.
5 del mattino, Stazione di Mosca, KFC, lungofiume Moika, Piatti, piccioni sui tetti, Isacco, Campo Marsovo, Captur yandexodrayvovyy, ed ecco Miran.
Miran
Da diversi anni la nostra lab con Eva, server di trasmissione, router virtuale MikroTik, hosting linkmeup con accesso IPv6 e ora hosting di podcast, si trova a Miran.

All'ingresso di Miran ci ha accolto inizialmente un'imponente DG.

La maggior parte degli impianti di generazione Diesel sono montati su ruote per due motivi:
- Mobilità: a poche centinaia di metri ci sono altri moduli di Miran. Hanno i loro generatori, ma non si sa mai — potrebbe essere necessario spostarli.
- Mobilità: non devono essere registrati come centrali elettriche fisse e quindi non è necessaria la documentazione progettuale.
Il DG di Miran si avvia in pochi secondi sia in inverno che in estate. Durante questo tempo, tutto il Data Center è alimentato da batterie.
E il server HP in armadio a Miran e la visita sono stati resi possibili grazie a Fëdor Rusakov.

L'intera visita si è svolta in un'atmosfera domestica accogliente. Caffè con biscotti, conversazioni su telecomunicazioni, sulle origini dell'azienda, sul trasporto di duecento server wcksh giudici da Mosca a Pietroburgo sotto il manto della notte. Con calma, abbiamo passeggiato per due edifici del Data Center. Entrambi — BrownField — convertiti da un vecchio stabilimento. Nel primo, di proprietà di Miran, dove abbiamo iniziato e dove ci siamo ricaricati al secondo piano dopo una passeggiata di quattro ore a Pietroburgo, c'era un tempo una fabbrica di impianti diesel, davvero giganteschi impianti diesel. In realtà non c'era un secondo piano — c'erano porte enormi per il passaggio. Hanno smontato tutto, creato un secondo piano, impianto di raffreddamento attivo, alimentazione elettrica ridondante, sistema antincendio a gas.
Classico corridoio caldo, da cui l'aria viene inviata ai condizionatori e sotto il pavimento flottante nel corridoio freddo chiuso.
Sotto il pavimento flottante sono nascosti anche i cavi di alimentazione.
Miran non è nato come una piattaforma per un singolo cliente ancorato, ma ha piuttosto sviluppato gradualmente un'offerta sul mercato dove c'è domanda.
Un tempo qui si trovava una grande banca con tutte le relative grate e sistemi di controllo accessi, ma ha già lasciato.

La domanda ha continuato a crescere, anche Miran, è comparso un secondo edificio — già in affitto — anch'esso BrownField — a duecento metri dal primo. La strada si snoda lungo il lungofiume della Grande Neva, passando davanti alla casa di Nobel.

Il nuovo edificio è stato costruito secondo un principio modulare con la possibilità di trasportare l'intero modulo in caso di problemi con il locatore. I primi due moduli sono stati acquistati dal produttore, il terzo — è stato assemblato tenendo conto dei vecchi errori.
L'architettura modulare ha presentato alcuni svantaggi — sono relativamente stretti — corridoio caldo — 60 cm — due persone non possono passarsi. E la cosa più importante — il costo del trasloco, come è emerso alla prima valutazione, è comparabile alla costruzione di un nuovo edificio.
Ma appaiono freschi e alla moda sia all'esterno che all'interno.
Il NOC ragazzi è su Linux ortodosso, Debian stabile.

Il nome dell'azienda, peraltro, deriva dalla scheda Sistema Meridian Integrated Recorded Announcement (MIRAN) nel centralino Meridian. E di conseguenza, anche il data center ha preso il nome così.

È stato deciso di costruire il data center nell'anno difficile del 2008.
Da allora, i ragazzi offrono dedicati e bell toll. In apposite stanze è stata installata l'attrezzatura degli operatori.
E questo impone alcune limitazioni e peculiarità sul lavoro. Ad esempio, nei rack ci sono diverse attrezzature, sia in termini di macchine che di rete. A Miran ho visto giusto Arista e Mellanox. Ogni attrezzatura richiede diverse condizioni di temperatura nel corridoio freddo, quindi si deve mantenere un livello molto basso — intorno ai 20°C, quindi non si può parlare di un PUE basso — per Miran è 1,5.
Un altro problema — con i matrimoni di serpenti nei rack. Appena lasciate entrare estranei con i loro cablaggi, scrivi "è sparita la bellezza". Nessuno ha eccezioni.

Purtroppo, introdurre misure drastica può risultare controproducente.

Le ultime foto.
E poi merchandise dal nostro tavolo al vostro e dal vostro al nostro. Ci siamo caricati tutti in taxi — e in linx.
linxdatacenter
Questi sono ragazzi seri, sul loro pass temporaneo c'è scritto anche "Security Matters". Questo sarà il leitmotiv di tutta la visita.
Dopo il dolce Miran in linxdatacenter capisci che sei arrivato in un data center di lusso. Nel giorno di riposo, 4 persone si sono riunite, diciamo, non proprio nel centro città, per raccontare di sé a cinque persone che difficilmente diventeranno loro clienti 🙂
Ci ha ricevuto Maria Svistunova, ci ha accompagnati a un grande tavolo per le trattative. Un po' di conversazioni informali sorseggiando caffè guatemalteco e poi si parte.

Le escursioni qui sono organizzate in modo sistematico. Maxim e Oleg conoscono il loro lavoro: raccontano a menadito, in modo chiaro e coinvolgente. Dove è necessario, mettono l'accento, mentre dove non lo è, lo evitano. Anche il senso dell'umorismo è ottimo, quindi più di due ore sono volate senza che ce ne accorgessimo.
Il vanto del Data Center è un uptime del 100% fin dal suo avvio nel 2011.
La fiducia è così alta che per le frazioni di secondo non è nemmeno previsto uno spazio sul tabellone.

Linx è un esempio di Data Center in formato GreenField. L'edificio è stato costruito appositamente per ospitare un Data Center. Pertanto, l'altezza dei soffitti, la solidità dei solai, gli ingressi di alimentazione elettrica, la loro riserva, i sistemi cablati — tutto è stato progettato e preso in considerazione già nella fase di costruzione.

Così, normalmente, il pavimento sopporta un rack di 800 kg, ma il peso può essere ulteriormente aumentato dopo un rinforzo aggiuntivo. Si parla di rack oracoli che costano un Falcon9 richiedono un'attenzione particolare.
Il Data Center è alimentato da un'unità gas-generatore, mentre l'elettricità comunale è solo di riserva. Secondo Maxim, questa è stata una decisione molto giusta, perché durante il noto blackout di San Pietroburgo, l'ufficio e il vicino business center hanno sofferto danni, mentre il Data Center ha continuato a funzionare.
Qui il generatore diesel non è più un rimorchio su ruote, ma un locale fisso con fumaioli che si ergono in alto sopra il paesaggio.
Il tempo di avvio è di non più di due minuti, e con le batterie l'intero Data Center può funzionare per circa un'ora. I diesel possono funzionare per 3 giorni senza rifornimento.
Qui regnano ordine e pianificazione.
Ecco, ad esempio, un luogo dove i clienti del Data Center possono prendere le chiavi dei loro rack tramite l'impronta digitale.

E questo è un locale dove i clienti possono svolgere tutte le necessarie operazioni ingegneristiche, per cui è appeso un attrezzo multifunzione al muro.


Queste sono le mensole per l'uso locale con tutto ciò che è vitale per il lavoro quotidiano:


È sempre carica e pronta per l'uso.
Il berretto del giovane hiphopper nella foto sopra ha salvato la testa di più di una persona. È rigido come un casco naturale — perfetto per muoversi sotto un pavimento falso alto un metro e mezzo, dove sporadicamente spuntano delle lamiere appuntite.
In realtà, sono i dipendenti del servizio.

Questo strumento apparentemente insignificante è un manometro differenziale.

È progettato per risolvere un compito semplice: mantenere la differenza di pressione tra il corridoio e la sala macchine. Ad esempio, in modo che all'interno sia leggermente più alta e, aprendo la porta, la polvere non entri, ma al contrario venga spinta lontano.
Il sistema antincendio è anch'esso a gas: in caso di emergenza, il gas esclude l'ossigeno e soffoca la combustione.

Nel linx si avvicinano solo ragazzi seri e molto seri, che hanno motivi di paranoia delle dimensioni di Ararat.
Le griglie e un sistema di controllo accessi separato dal centro dati sono solo l'inizio.
È interessante quando per risolvere un problema o per nuove connessioni arrivano due persone: una con una chiave materiale e l'altra con una elettronica. Ma quando un revisore del cliente, con gli occhiali, scende sotto il pavimento galleggiante, sposta due fogli di griglie e dice che ci passerà la testa di un bambino, si capisce che la persona ha visto alcune cose interessanti nella vita.
Ci sono state situazioni divertenti quando progettando la gabbia abbiamo considerato tutto il possibile, tutti i sistemi di sicurezza, tutte le dimensioni che consentono di portare un rack e posizionarvi l'attrezzatura, ma in qualche modo non abbiamo pensato alle dimensioni degli ingegneri che ci lavoreranno. E loro non riescono a passare né davanti né di profilo tra la gabbia e il rack.
Se fossi il FSB, metterei il mio hardware nel linx 🙂
Dopo il tour, siamo rimasti a lungo a chiacchierare amichevolmente con una pizza.
Da questo regno di sicurezza e ordine siamo andati a RETN.
RETN
Con questi ragazzi ci conosciamo da tempo e bene. Quindi non è sorprendente che finalmente ci siamo riuniti sul loro tetto per grigliare e raccontare storie.

Siamo stati anche da loro, anche se, sembra, non l'abbiamo raccontato. L'anno scorso i piani per conquistare i tetti di San Pietroburgo sono falliti a causa della FIFA.
RETN è in realtà il più grande operatore di backhaul con fibra in tutto il pianeta. La loro rete farebbe invidia a qualsiasi ragno.
Il DC sulla circonvallazione è un progetto casalingo per l'anima, che ha trovato la sua nicchia in un mercato in crescita. Qui si collocano coloro che hanno bisogno di una connessione robusta con il mondo e di un accesso agli altri operatori locali.
Ad esempio, in RETN c'è il CDN di Netflix.


Con sorpresa ho scoperto che ogni loro nodo è firmato a mano con una frase unica.
E così, queste scatole festive vengono preparate in diverse città sui POP di RETN (e, ovviamente, non solo qui), per portarvi il più rapidamente possibile «Black Mirror» e «Peaky Blinders».
Ci sono anche CDN di Google e un sacco di operatori, sia a livello locale che federale.
Accanto all'edificio di RETN ci sono due piccole (rispetto a quelle di Mirano) generatori diesel e un'auto con delle taniche, pronta a fare rifornimento. Suona quasi come una piccola impresa familiare.
Le trattative serali sul tetto ci hanno portato a far sì che RETN ci fornisca una macchina virtuale per il sito di backup per l'hosting di podcast e immagini.
Ragazzi mondiali, un data center super accogliente, una rete che impressiona per le sue dimensioni.

Per qualcuno questo giorno è terminato con un torneo di Duke Nukem, per qualcun altro con un tanto atteso sonno in hotel.
Il giorno dopo avevamo pochi piani: Metrotex e podcast dal vivo — .
Metrotex
Appena un mese fa nel nostro podcast telecom Misha Sokolov e Denis Gabidullin di NTC Metrotex slash Plumspace, e abbiamo discusso di cosa sia Smart SFP. E adesso abbiamo potuto toccarli dal vivo.
Denis, che ha guidato il tour dell'ufficio di Metrotex a Pietroburgo (che, a proposito, non è cambiato dall'ultima nostra visita), ci ha dato uno degli esemplari non appena siamo entrati.
All'inizio mi sono sorpreso di quanto fosse grezzo — sembrava intagliato con una sega e una lima da un chiave da 32.

Si è scoperto che il corpo del campione sperimentale era stampato su una stampante 3D con polvere di metallo, come si può vedere dalla superficie ruvida. Gli altri — quelli pronti per la produzione — sono in perfette condizioni.

Ma in generale, guardandoli, ci si meraviglia di come siano riusciti a nascondere una così grande quantità di intelligenza in un corpo quasi standard.

Consiglio di ascoltare . È risultato interessante a mio avviso.
Il design dell'ufficio è il massimo della normalità. Uffici rettangolari relativamente piccoli, allungati verso la finestra, abbastanza scuri, il che era un po' opprimente. Ma l'atmosfera, nonostante fosse un giorno festivo, era lavorativa.

La decorazione non è cambiata in due anni. Alcuni poster e lavagne erano piacevoli.
Abbiamo visitato diverse stanze: R&D, sistemisti, FPGA, abbiamo tenuto in mano diversi tipi di SFP, programmatori, e abbiamo visto il primo modello in cui Smart era stato estratto dallo SFP su un cavo — uno dei primi esperimenti — più che altro una prova di concetto che dimostra che funziona.
Si dice che per alcuni clienti sia persino comodo avere un cavo che sporge dall'hardware.
Il primo obiettivo, due anni fa, era costruire un SFP ottico normale che trasmettesse almeno un segnale.
Successivamente, abbiamo assemblato separatamente la parte Smart con SFP di terzi (proprio su un cavo), per assicurarci che fossero in grado di comporre i chip.
Metrotex ha svolto un lavoro enorme. Pensare che in 2 anni sia stato realizzato un modulo ottico completamente funzionante, capace di incapsulamento, telemetria, server di tempo preciso e convertitore di interfacce.
E in tutto questo, hanno anche perfezionato fino all'ideale (anche se resta da verificare nel tempo) la funzionalità di base per la trasmissione del segnale. Non devono esserci attenuazioni, né persino rare perdite dovute allo SFP. E non deve nemmeno surriscaldarsi, nonostante il gruppo di ASIC, FPGA e CPU all'interno.
Bravo!
Un sistema computazionale completo:
- CPU: NXP i.MX6 ARM fino a 900 MHz
- FPGA: Lattice ECP5 fino a 85K LUT
- RAM: DDR3 fino a 1 GB
Denis ha sottolineato che in azienda si pratica e si promuove lo scambio di conoscenze e esperienze. E qui ho pensato: «Esiste un'alternativa? 0_о». — Sì, spesso arrivano persone che nel precedente lavoro erano immerse nel loro mondo, non comunicavano, svolgevano lavoro doppio o triplo e in generale evitavano tentativi di comunicazione.
E qui ho ricordato che, non più di due anni fa, lavoravo in una grande azienda internazionale altamente restrittiva, dove le conferenze erano proibite e lo scambio di conoscenze non esisteva. Ed ero uno degli evangelisti degli incontri settimanali di scambio di esperienze, che sembravano salvare ingegneri solitari in regioni remote.
In generale, in Metrotex si svolgono regolarmente corsi di formazione e conferenze interne, e questo è davvero positivo.
Poi ci hanno portato in un affascinante reparto di montaggio. Quante volte ci sono stato, sembra che la mia meraviglia infantile non svanisca mai.
Metrotex ha attrezzature per la stampa su circuiti direttamente in ufficio.
Stencil per l'applicazione di pallini di saldatura, stampante per componenti SMD (altrimenti non posso chiamarla in altro modo), una piccola stufetta per la cottura delle schede e spazi di lavoro per il montaggio a mano.



Con mia sorpresa, ho scoperto che i microchip con centinaia di piedini vengono saldati a mano. Denis dice che i loro ragazzi saldano parti minute con una precisione e una velocità davvero sorprendenti, e a volte non ha senso accendere la macchina infernale: l'uomo fa più in fretta.

Tra di noi abbiamo ribattezzato la linea di produzione Metrotec Elttex-verilight, sulla scia di una recente visita a loro.
Inoltre, nell'ufficio c'è una stampante 3D e una fresatrice per esigenze interne, sulla quale però hanno già inciso medaglie per l'anno scorso. .

Da lì siamo andati in un fantastico Krang Pizza, dove abbiamo già mangiato insieme la pizza-burger mutante, sia per dimensioni che per significato, e ci siamo diretti all'ufficio di IQ option, dove abbiamo registrato il primo episodio. .
Il giorno successivo siamo passati anche al Centro Laser su consiglio di Mamont, dove abbiamo vissuto un estasi tecnocratica e un po' di infiammazione della brama, ma di questo parleremo in un'altra storia.
In conclusione, vorrei dire che tutte le visite e gli incontri sono stati molto diversi, sia per scala che per indirizzo.
Miran, che ha ospitato il nostro hosting, sta crescendo rapidamente, ma è ancora amichevolmente semplice.
Links è davvero un grande centro dati, con la sicurezza al centro e marketer esperti.
RETN sono ragazzi giovani e allegri "dai garage", che stanno costruendo una gigantesca rete e attualmente hanno un piccolo centro dati e non disdegnano accendere un fuoco sul tetto.
Metrotec è una squadra relativamente piccola di sviluppatori russi di hardware e software, che produce quasi "con queste mani" una serie di strumentazione più che competitiva, e ora sta entrando in un nuovo mercato con obiettivi ambiziosi.
E il Centro Laser, che va oltre gli interessi di linkmeup, ma è un oggetto di nostri interessi personali. Ha lasciato un'impressione molto piacevole e ha inciso un microfono su un registratore.
Fonte: habr.com
