Negdje na sredini između Moskve i Sankt Peterburga nalazi se gradić Udomlja. Ranije je bila poznata po nuklearnoj elektrani Kalinjin. 2019. godine u blizini se pojavila još jedna atrakcija - Udomlya megadata centar sa 4 hiljade regala.
Nakon pridruživanja Rostelecom-DPC timu, stručnjaci DataLine će takođe biti uključeni u rad ovog data centra. Sigurno ste već čuli nešto o "Udomlya". Danas smo odlučili da vam detaljno ispričamo kako sve tamo funkcioniše.
Industrijski pejzaži: data centar od 32 m² i nuklearna elektrana u pozadini. Udomlya uzorak proljeća 000.
Ispod reza prikupili smo više od 40 fotografija inženjerskih sistema data centara sa detaljnim opisom. One koji stignu do kraja čeka prijatno iznenađenje.
O logistici
Data centar se nalazi u regionu Tver. Putovanje od Moskve do Udomlye trajat će oko tri sata: 1 sat i 45 minuta na Sapsanu do stanice Vyshny Volochek, a odatle će vas, na prethodni zahtjev, dočekati šatl i odvesti do data centra. Od Sankt Peterburga do Vyshny Volocheka potrebno je malo duže - 2 sata i 20 minuta.
Automobilom iz Moskve možete stići za 4,5 sata, iz Sankt Peterburga za 5.
Da, vjerovatno nećete htjeti ići ovdje na nekoliko jedinica. Ali ako vam je potreban novi dom za desetine regala, onda vrijedi pogledati izbliza. Ima dovoljno prostora i struje, čak i ako želite udvostručiti ovu količinu u bilo kojem trenutku. U Moskvi, gdje su, prema našem iskustvu, data centri rezervisani u fazi izgradnje, ovaj trik neće uvijek uspjeti.
Pored toga, lokacija data centra između Moskve i Sankt Peterburga može se koristiti za geo-rezervaciju. Ako su glavni objekti u Moskvi ili Sankt Peterburgu, onda bi se rezervna lokacija dobro uklopila.
Tim pametnih ruku pomoći će u svim standardnim operacijama na licu mjesta. Oni će primiti, raspakovati i instalirati opremu u rekove, spojiti je na napajanje i mrežu i omogućiti daljinski pristup opremi. U slučaju kvara, pomoći će u dijagnostici i zamijeniti neispravne komponente.
Prva faza data centra sastoji se od 4 računarske sobe, odnosno modula, sa po 205 rekova. U prizemlju se nalaze 2 mašinske prostorije i energetski centar, a na drugom spratu još dve prostorije i rashladni centar. Hajde da vidimo kako sve funkcioniše ovde.
Fizička sigurnost
Data centar zauzima određeno područje u koje se ne može ući bez propusnice i identifikacionog dokumenta. Oni koji stignu automobilom dobijaju i propusnicu za prevoz i tek nakon toga mogu ući u data centar. Za one koji imaju sve u redu sa svojom propusnicom, data centar je otvoren 24x7.
Prva XNUMX-časovna sigurnosna stanica je ulaz na teritoriju.
Idemo dalje i dolazimo do kontrolnog punkta direktno na ulazu u data centar.
Službenici obezbjeđenja ne samo da pozdravljaju klijente i izdaju propusnice, već i danonoćno prate video zid koji prikazuje slike svih unutrašnjih prostorija data centra i okolnih područja.
Napajanje strujom
Struja počinje svoj put do podatkovnog centra iz nuklearne elektrane. Data centar prima 10 kV za 6 opadajućih transformatora. Zatim, 0,4 kV prolazi kroz dva nezavisna puta do niskonaponske rasklopne jedinice (LVSD). Zatim, preko DIBP-a, napajanje se dovodi do IT i inženjerske opreme. Za rack su pogodna dva nezavisna ulaza, odnosno 2N redundantnost. Više o tome kako sve funkcionira u smislu napajanja reći ćemo vam u posebnom članku.
Put električne energije u podatkovnom centru Udomlya
Električni autobusi preko kojih struja dolazi od RUNN-a do DIBP energetskih panela
Redovi RUNN-a
Unatoč činjenici da se u blizini nalazi nuklearna elektrana, u svakom pouzdanom podatkovnom centru glavno napajanje se smatra zagarantovanim. U našim data centrima, kao što znate, za to su odgovorni dizel agregati, ali ovdje se koriste dinamički UPS (DIUPS). Takođe obezbeđuju neprekidno napajanje strujom. DIUP-ovi su rezervisani prema šemi N+1.
DIPS marke Euro-Diesel (Kinolt) sa kapacitetom od 2 MW. Toliko glasno urlaju da je bolje ne ulaziti unutra bez čepića za uši.
I ovako to funkcionira. DIBP je kombinacija tri glavne komponente: dizel motora, sinhrone električne mašine i akumulatora kinetičke energije sa rotorom. Svi su pričvršćeni za glavnu osovinu.
Električna mašina može raditi u režimu elektromotora i generatora. Kada se DIBP redovno napaja iz grada, električna mašina je električni motor koji okreće rotor i skladišti kinetičku energiju u bateriji.
Sivi blok u prvom planu je sinhrona mašina DIBP
Dizel motor DIBP
Ako gradska struja nestane, električna mašina prelazi u generatorski režim. Zahvaljujući akumuliranoj kinetičkoj energiji, rotor dovodi do rotacije glavne osovine DIBP-a, električna mašina nastavlja da radi bez gradske struje i izlazni napon ne nestaje. Ovo osigurava neprekidno napajanje u data centru. Istovremeno, DIBP upravljački sistem šalje signal za pokretanje dizel motora. Ista kinetička energija rotora pokreće dizel motor i pomaže mu da dostigne radnu frekvenciju. Rotor drži brzinu do jedne minute i to je dovoljno da dizel uđe u igru. Nakon pokretanja, dizel motor rotira glavnu osovinu, a kroz nju električnu mašinu (ovdje prebacivanje DIBP-a iz jednog načina rada u drugi).
Kao rezultat toga, snaga u regalima se ne gubi ni na sekundu.
Spremnik svakog dizel generatora je dizajniran za 3 sata. Data centar ima i vlastito skladište goriva za 80 tona, koje će zadržati cjelokupno opterećenje podatkovnog centra 24 sata. U slučaju vrlo hipotetičkih nestanka struje (obližnja nuklearna elektrana to neće dozvoliti), postoje dogovori sa nekoliko izvođača koji će po pozivu brzo isporučiti dizel gorivo na gradilište. Generalno, sve je kako treba.
Svake sedmice DIBP-ovi sami testiraju i pokreću dizel motor. Jednom mjesečno se vrše ispitivanja uz kratkotrajno gašenje gradske mreže.
DIBP kontrolni panel
Prostorije ShchGP i ShchBP
“Magistralni vodovi” i “spojevi” energetskih kablova
Mašinske sobe
Svaki modul se nalazi u hermetičkoj zoni, u posebnoj kutiji. Ovi dodatni zidovi i krov štite turbinu od prašine, vode i vatre. Prilikom prihvatanja data centra, područje zaštite se tradicionalno prosipa vodom kako bi se provjerilo ima li curenja.
Krov zgrade i vlastiti krov turbinske prostorije sa drenažnim cijevima
Voda koja pada na krov zaštitne zone odlazi kroz oluke u odvodni cjevovod
Svaka hala je spremna da primi 205 regala prosječne snage 5 kW.
Raspored opreme u sali organizovan je po šemi hladnih i toplih hodnika.
Bolidni sistemi za rano otkrivanje požara i gasni sistemi za gašenje požara su postavljeni duž plafona.
Senzori dima se takođe nalaze ispod podignutog poda. Dovoljno je aktivirati bilo koja dva senzora i oglasit će se sirena za dojavu požara, ali o tome ćemo nešto kasnije.
Tu, uz redove klima uređaja, nalaze se senzori za curenje trake.
Svaki hodnik između šaltera je „nadgledan“ CCTV kamerama.
Po želji, regali se mogu postaviti iza posebne ograde (kaveza) i na njih se mogu ugraditi dodatne kamere, sistemi kontrole pristupa i senzori pokreta, senzori jačine zvuka itd.
Hlađenje
Data centar Udomlya koristi etilen glikol rashladni krug. U mašinskim prostorijama se nalaze klima uređaji, na krovu rashladni uređaji, a na drugom spratu je rashladni centar sa cevovodima, sistem automatizacije i upravljanja, pumpe, rezervoari za skladištenje itd.
Svaka soba ima 12 klima uređaja, od kojih polovina sa parnim ovlaživačima. N+1 shema redundanse.
U hladnom prolazu temperatura se održava između 21-25 °C i vlažnost 40-60%.
Precizni klima uređaji Stulz Cyber Cool
Postoje dva prstena oko svake mašinske prostorije: “hladna” linija koja dovodi hlađeni etilen glikol do klima uređaja i “vruća” linija koja odvodi zagrejani glikol iz klima uređaja do rashladnih uređaja. Ako otvorimo podignuti pod u hodniku, videćemo kapljice u mašinskim prostorijama iz rashladnog sistema.
Put etilen glikola je sljedeći: iz klima uređaja zagrijani etilen glikol prvo ulazi u povratni vod oko mašinske prostorije, a zatim u zajednički prsten. Zatim etilen glikol odlazi u pumpu, a zatim u čiler, gdje se hladi na 10 °C. Nakon rashladnog uređaja, etilen glikol se vraća u klima uređaj kroz zajednički dovodni vod, rezervoare za skladištenje i prsten oko modula.
Dijagram napajanja hlađenja data centra
Ovako izgleda rashladni centar kroz koji prolazi 100 m3 etilen glikola
Sivi kontejneri su ekspanzijski rezervoari. Zagrijani etilen glikol prolazi kroz njih na svom putu do hladnjaka. Ljeti se etilen glikol širi i zahtijeva dodatni prostor.
Ovi impresivni kontejneri su rezervoari za skladištenje od 5 m3 svaki. Omogućavaju neprekidno hlađenje data centra u slučaju kvara rashladnog uređaja.
Ohlađeni etilen glikol iz rezervoara se dovodi u sistem, što omogućava da se temperatura na izlazu klima uređaja održava na 19 °C tokom 5 minuta. Čak i ako je napolju +40°C.
Pumpe za hlađenje
Mrežasti džepni filteri i rezervoari separatora za pročišćavanje etilen glikola od mehaničkih čestica i zraka
Tanka crvena linija na podu ispod cijevi je traka senzora curenja. Prolaze duž cijelog perimetra rashladnog centra.
Ako bilo koja od cijevi procuri, etilen glikol će proći kroz drenažni sistem i završiti u posebnom rezervoaru u prostoriji za tretman vode. Postoje i dva rezervoara sa „rezervnim“ etilen glikolom za dopunu rashladnog sistema u slučaju većih curenja.
I o rashladnim uređajima. Na krovu je 5 rashladnih uređaja koji koriste N+1 redundantnu shemu. Svakodnevno automatizacija, ovisno o radnim satima, određuje koji će rashladni uređaj staviti u rezervu.
Rashladni uređaji marke Stulz CyberCool 2 sa kapacitetom od 1096 kW
Rashladni uređaji podržavaju tri načina rada:
- kompresor – od 12 °C;
- mešoviti – na 0–12 °C;
- slobodno hlađenje – od 0 i niže. Ovaj način rada uključuje hlađenje etilen glikola kroz rad ventilatora umjesto kompresora.
Sigurnost od požara
Data centar ima dvije gasne stanice za gašenje požara. Svaka sadrži dvije baterije od 11 cilindara: prva je glavna, druga je rezervna.
Protivpožarni sistem data centra povezan je sa serverom NE Kalinjin, a po potrebi će i vlastita vatrogasna služba stanice stići na lice mjesta za nekoliko minuta.
Na fotografiji se vidi sistem za dojavu požara i dugme za izlaz u slučaju nužde u turbinskoj prostoriji. Potonje je potrebno ako vrata nisu bila otključana iz nekog razloga tijekom požarnog alarma: prekida napajanje električne brave.
Telekom
Dva autoputa Rostelecoma dolaze do data centra nezavisnim rutama. Svaki DWDM sistem ima kapacitet od 8 terabita.
Data centar ima dva telekom ulaza, koji se nalaze na udaljenosti većoj od 25 metara jedan od drugog.
Na sajtu su prisutni i operateri Rascom, Telia Carrier Russia, Consyst i DataLine će se pojaviti u bliskoj budućnosti.
Od Udomlye možete izgraditi kanal do Moskve, Sankt Peterburga ili bilo gdje u Rusiji i svijetu.
Monitoring
Dežurni inženjeri dežuraju u nadzornom centru XNUMX sata.
Ovdje se primaju sve informacije o inženjerskim sistemima: klimatski uslovi u hali, stanje ulaza, DIBP itd.
Svaka dva sata dežurni obilaze sve infrastrukturne prostore kako bi pregledali stanje inženjerske i informatičke opreme.
Prateća infrastruktura
Predviđen je istovarni prostor za dostavu opreme u data centar.
Prostor za istovar iznutra.
Ako je vaša hala na drugom spratu, onda će ova hidraulična dizala dopremiti svu opremu tamo.
Ormari za pohranjivanje klijentskih alata i još mnogo toga.
Malo o svakodnevnom životu
Za stalno osoblje možete iznajmiti opremljena radna mjesta u kancelarijskom dijelu. Ako ih posjećujete s vremena na vrijeme, možete odsjesti u privremenom hotelu sa svim sadržajima na teritoriji data centra.
Uredski dio ima i trpezariju i kuhinju.
A svuda okolo je nevjerovatna priroda sa šumama, jezerima, rijekama, pecanjem i drugim aktivnostima na otvorenom. Dođite u posetu.
Kao što sam obećao, lijep bonus za one koji su stigli do kraja. Prvih šest mjeseci, iznajmljivanje prostora za regale u Udomlyi s isporučenom snagom od 5 kW bit će besplatno. Plaćajte samo stvarno potrošenu električnu energiju. Pošaljite svoju prijavu na .
izvor: www.habr.com