모스크바와 상트페테르부르크 간: Udomlya 메가데이터 센터 투어

모스크바와 상트페테르부르크 중간쯤에 우돔랴(Udomlya)라는 작은 마을이 있습니다. 이전에는 칼리닌 원자력 발전소로 알려졌습니다. 2019년에는 4개의 랙을 갖춘 Udomlya 메가데이터 센터라는 또 다른 명소가 근처에 나타났습니다. 

Rostelecom-DPC 팀에 합류한 후 DataLine 전문가도 이 데이터 센터 운영에 참여할 것입니다. 확실히 당신은 이미 "Udomlya"에 대해 들어본 적이 있을 것입니다. 오늘 우리는 그곳에서 모든 것이 어떻게 작동하는지 자세히 설명하기로 결정했습니다.

산업 환경: 32m² 규모의 데이터 센터와 원자력 발전소를 배경으로 합니다. Udomlya 샘플 봄 000.

컷 아래에는 자세한 설명과 함께 데이터 센터 엔지니어링 시스템에 대한 40장 이상의 사진이 수집되어 있습니다. 끝까지 도달한 사람들에게는 즐거운 놀라움이 기다리고 있습니다.

물류에 대해서

데이터 센터는 Tver 지역에 있습니다. 모스크바에서 Udomlya까지 이동하는 데 약 1시간이 소요됩니다. Sapsan에서 Vyshny Volochek 역까지 45시간 2분이 소요되며, 사전 요청 시 셔틀이 귀하를 만나 데이터 센터까지 모셔다 드립니다. 상트페테르부르크에서 Vyshny Volochek까지는 20시간 XNUMX분으로 조금 더 걸립니다. 

자동차로 모스크바에서 4,5시간 5분, 상트페테르부르크에서 XNUMX시간 안에 도착할 수 있습니다.

예, 아마도 몇 단위 때문에 여기에 가고 싶지 않을 것입니다. 그러나 수십 개의 랙을 위한 새 집이 필요하다면 자세히 살펴볼 가치가 있습니다. 언제든지 이 양을 두 배로 늘리고 싶어도 공간과 전기는 충분합니다. 우리 경험에 따르면 데이터 센터가 건설 단계에서 예약되는 모스크바에서는 이 방법이 항상 작동하는 것은 아닙니다.

또한 모스크바와 상트페테르부르크 사이의 데이터 센터 위치를 지리적 예약에 사용할 수 있습니다. 주요 시설이 모스크바나 상트페테르부르크에 있으면 백업 사이트가 적합할 것입니다.

스마트 핸드 팀은 현장의 모든 표준 작업을 지원합니다. 이들은 장비를 받아 랙에 포장을 풀고 설치한 후 전원과 네트워크에 연결하고 장비에 대한 원격 액세스를 제공합니다. 오작동이 발생하는 경우 진단에 도움이 되고 고장난 구성 요소를 교체합니다.

데이터 센터의 첫 번째 단계는 각각 4개의 랙이 있는 205개의 컴퓨터실 또는 모듈로 구성됩니다. 2층에는 기계실 XNUMX개와 에너지 센터가 있고, XNUMX층에는 기계실 XNUMX개와 냉동 센터가 있습니다. 여기서 모든 것이 어떻게 작동하는지 살펴 보겠습니다.

물리적 보안

데이터 센터는 지정된 구역을 차지하고 있으며 출입증과 신분증 없이는 들어갈 수 없습니다. 자동차로 도착하는 사람들도 교통 이용권을 받고 그 후에야 데이터 센터에 들어갈 수 있습니다. 패스로 모든 것을 준비한 사람들을 위해 데이터 센터는 연중무휴 24시간 열려 있습니다.

첫 번째 XNUMX시간 보안 초소는 해당 지역의 입구입니다.

우리는 더 나아가 데이터 센터 입구의 검문소에 직접 도착합니다.

보안 담당자는 고객을 맞이하고 출입증을 발급할 뿐만 아니라, 데이터센터 내부 전체와 주변 지역의 이미지가 표시되는 비디오월을 XNUMX시간 모니터링합니다.

전원 공급 장치

전기는 원자력 발전소에서 데이터 센터로 향하는 여정을 시작합니다. 데이터 센터는 10개의 강압 변압기에 대해 6kV를 수신합니다. 다음으로 0,4kV는 2개의 독립적인 경로를 거쳐 저전압 배전반(LVSD)으로 이동합니다. 그런 다음 DIBP를 통해 IT 및 엔지니어링 장비에 전원이 공급됩니다. XNUMX개의 독립적인 입력이 랙에 적합합니다. 즉, XNUMXN 이중화입니다. 별도의 기사에서 전원 공급 장치 측면에서 모든 것이 어떻게 작동하는지 자세히 설명하겠습니다.

Udomlya 데이터 센터의 전기 경로

RUNN에서 DIBP 전원 패널로 전기가 공급되는 전원 버스

RUNN의 행

근처에 원자력 발전소가 있다는 사실에도 불구하고 신뢰할 수 있는 데이터 센터에서는 주 전원 공급이 보장되는 것으로 간주됩니다. 아시다시피 당사 데이터 센터에서는 디젤 발전기 세트가 이를 담당하지만 여기서는 동적 UPS(DIUPS)가 사용됩니다. 또한 중단 없는 전원 공급 장치를 제공합니다. DIUP는 N+1 방식에 따라 예약됩니다. 

2MW 용량의 DIPS 브랜드 Euro-Diesel(Kinolt). 그들은 너무 크게 으르렁거려서 귀마개 없이는 들어가지 않는 것이 좋습니다.

이것이 작동하는 방식입니다. DIBP는 디젤 엔진, 동기식 전기 기계, 로터가 있는 운동 에너지 축적기 등 세 가지 주요 구성 요소의 조합입니다. 모두 메인 샤프트에 고정되어 있습니다.

전기 기계는 전기 모터 및 발전기 모드에서 작동할 수 있습니다. DIBP는 도시에서 정기적으로 전력을 공급받을 때 전기기계는 로터를 회전시켜 운동에너지를 배터리에 저장하는 전기모터이다.

전경의 회색 블록은 동기식 기계 DIBP입니다.

디젤 엔진 DIBP

도시 전력이 꺼지면 전기 기계는 발전기 모드로 전환됩니다. 축적된 운동에너지 덕분에 로터는 DIBP의 주축을 회전시키며 전기기계는 도시전력 없이도 계속 작동하며 출력전압도 사라지지 않는다. 이를 통해 데이터 센터에 중단 없는 전원 공급이 보장됩니다. 동시에 DIBP 제어 시스템은 디젤 엔진을 시동하라는 신호를 보냅니다. 로터의 동일한 운동 에너지로 디젤 엔진이 시동되고 작동 주파수에 도달하는 데 도움이 됩니다. 로터는 최대 XNUMX분 동안 속도를 유지하며 이는 디젤 엔진이 작동하기에 충분합니다. 시동 후 디젤 엔진은 메인 샤프트를 회전시키고 이를 통해 전기 기계(여기서는 시각적 비디오 DIBP를 한 모드에서 다른 모드로 전환합니다.

결과적으로 랙의 전원은 단 XNUMX초도 손실되지 않습니다.

각 디젤 발전기의 탱크는 3시간 동안 설계되었습니다. 데이터센터에는 80톤 규모의 자체 연료 저장 시설도 갖추고 있어 데이터센터의 전체 부하를 24시간 동안 보관할 수 있다. 매우 가상적인 정전이 발생할 경우(인근 원자력 발전소에서는 이를 허용하지 않음) 요청 시 즉시 디젤 연료를 현장에 전달하는 여러 계약업체와 계약을 맺었습니다. 일반적으로 모든 것이 예상대로입니다.

매주 DIBP는 자체 테스트를 수행하고 디젤 엔진을 시동합니다. 한 달에 한 번 도시 네트워크를 단기적으로 종료하여 테스트가 수행됩니다.

DIBP 제어판

ShchGP 및 ShchBP 구내 

전력 케이블의 "간선" 및 "접속부"

기계실

각 모듈은 특수 상자의 밀폐 구역에 있습니다. 이러한 추가 벽과 지붕은 터빈실을 먼지, 물, 화재로부터 보호합니다. 데이터 센터를 인수할 때 누출 여부를 확인하기 위해 전통적으로 격리 구역에 물을 쏟았습니다.

건물의 지붕과 배수관이 있는 터빈실의 자체 지붕

봉쇄 구역의 지붕에 떨어지는 물은 홈통을 통해 배수 파이프라인으로 이동합니다.

각 홀에는 평균 전력 205kW의 랙 5개를 수용할 준비가 되어 있습니다.

홀의 장비 배치는 추운 복도와 더운 복도의 구성에 따라 구성됩니다. 


견고한 조기 화재 감지 및 가스 소화 시스템은 천장을 따라 배치됩니다. 

연기 센서도 이중 바닥 아래에 있습니다. 두 개의 센서를 작동시키는 것만으로도 충분하며 화재 경보 사이렌이 울리지만 이에 대해서는 잠시 후에 이야기하겠습니다.

바로 거기 에어컨 줄을 따라 테이프 누출 센서가 있습니다.

카운터 사이의 각 복도는 CCTV 카메라로 "감시"됩니다.
원하는 경우 랙을 특수 울타리(케이지) 뒤에 배치할 수 있으며 추가 카메라, 액세스 제어 시스템, 모션 센서, 볼륨 센서 등을 설치할 수 있습니다. 

냉각

Udomlya 데이터 센터는 에틸렌 글리콜 냉각기 회로를 사용합니다. 기계실에는 에어컨이 있고 지붕에는 냉각기가 있으며 XNUMX층에는 파이프라인, 자동화 및 제어 시스템, 펌프, 저장 탱크 등을 갖춘 냉동 센터가 있습니다.

각 객실에는 12개의 에어컨이 있으며, 그 중 절반에는 스팀 가습기가 설치되어 있습니다. N+1 중복 구성.

냉복도에서는 온도가 21~25°C, 습도는 40~60%로 유지됩니다.

정밀 에어컨 Stulz Cyber ​​​​Cool 

각 기계실 주위에는 두 개의 링이 있습니다. 냉각된 에틸렌 글리콜을 에어컨에 공급하는 "콜드" 라인과 에어컨에서 가열된 글리콜을 냉각기로 제거하는 "핫" 라인입니다. 복도의 이중 바닥을 열면 냉동 시스템에서 기계실로 떨어지는 것을 볼 수 있습니다. 

에틸렌 글리콜의 경로는 다음과 같습니다. 에어컨에서 가열된 에틸렌 글리콜은 먼저 기계실 주변의 복귀 라인으로 들어간 다음 공통 링으로 들어갑니다. 그런 다음 에틸렌 글리콜은 펌프로 이동한 다음 냉각기로 이동하여 10°C로 냉각됩니다. 냉각기 이후 에틸렌 글리콜은 공통 링 공급 라인, 저장 탱크 및 모듈 주변 링을 통해 에어컨으로 반환됩니다.

데이터 센터 냉각 공급 다이어그램

이것은 100m3의 에틸렌 글리콜이 통과하는 냉동 센터의 모습입니다. 

회색 용기는 팽창 탱크입니다. 가열된 에틸렌 글리콜은 냉각기로 이동하는 동안 이를 통과합니다. 여름에는 에틸렌 글리콜이 팽창하여 추가 공간이 필요합니다.

이 인상적인 컨테이너는 각각 5m3의 저장 탱크입니다. 냉각 장치에 장애가 발생하는 경우 데이터 센터를 중단 없이 냉각합니다.
탱크에서 냉각된 에틸렌글리콜이 시스템에 공급되며 이를 통해 에어컨 출구 온도를 19분간 5°C로 유지할 수 있습니다. 외부 온도가 +40°C인 경우에도 마찬가지입니다.

냉동 펌프

기계적 입자와 공기로부터 에틸렌 글리콜을 정화하기 위한 메쉬 포켓 필터 ​​및 분리기 탱크

배관 아래 바닥에 있는 얇은 빨간색 선이 누수 센서 테이프입니다. 그들은 냉동 센터의 전체 둘레를 따라 이동합니다.

파이프 중 하나라도 누출되면 에틸렌 글리콜은 배수 시스템을 통과하여 수처리실의 특수 탱크로 보내지게 됩니다. 또한 심각한 누출이 발생할 경우 냉동 시스템을 보충하기 위한 "예비" 에틸렌 글리콜이 들어 있는 두 개의 탱크도 있습니다.

그리고 냉각기에 대해서. N+5 중복 구성을 사용하여 지붕에 1개의 냉각기가 있습니다. 매일 자동화는 작동 시간에 따라 어떤 냉각기를 예비로 배치할지 결정합니다. 

2kW 용량의 Stulz CyberCool 1096 브랜드 냉각기

냉각기는 세 가지 모드를 지원합니다.

• 압축기 – 12°C 이상;
• 혼합 – 0~12°C;
• 자유 냉각 – 0 이하. 이 모드에는 압축기가 아닌 팬 작동을 통해 에틸렌 글리콜을 냉각시키는 작업이 포함됩니다.

화재 안전

데이터 센터에는 11개의 가스 소화대가 있습니다. 각 배터리에는 XNUMX개의 실린더로 구성된 배터리 XNUMX개가 포함되어 있습니다. 첫 번째는 주 배터리이고 두 번째는 예비 배터리입니다.

데이터센터의 소방 시스템은 Kalinin NPP 서버와 연결되어 있으며, 필요한 경우 역 자체 소방대가 몇 분 내에 현장에 도착합니다.

사진은 터빈실의 화재 경보 시스템과 비상구 버튼을 보여줍니다. 화재 경보 중에 어떤 이유로 문이 잠금 해제되지 않은 경우 후자가 필요합니다. 전기 잠금 장치에 대한 전원 공급을 차단합니다.

텔레콤

두 개의 Rostelecom 고속도로가 독립적인 경로를 통해 데이터 센터에 도착합니다. 각 DWDM 시스템의 용량은 8테라비트입니다.

데이터 센터에는 서로 25m 이상 떨어진 곳에 두 개의 통신 입력이 있습니다.

또한 사이트에는 Rascom, Telia Carrier Russia, Consyst 및 DataLine 운영자가 가까운 시일 내에 나타날 예정입니다.  

Udomlya에서 모스크바, 상트페테르부르크 또는 러시아와 세계 어느 곳으로든 운하를 건설할 수 있습니다. 

모니터링

근무 중인 엔지니어가 XNUMX시간 모니터링 센터에서 근무하고 있습니다.

엔지니어링 시스템에 대한 모든 정보는 여기에서 수신됩니다: 홀의 기후 조건, 입력 상태, DIBP 등.

XNUMX시간마다 당직 직원이 모든 인프라 시설을 순회하여 엔지니어링 및 IT 장비의 상태를 검사합니다. 

지원 인프라

데이터 센터로 장비를 배송하기 위한 하역 공간이 제공됩니다.

내부에서 하역 구역.

홀이 XNUMX층에 있는 경우 이 유압 리프트가 모든 장비를 그곳으로 배달합니다.

클라이언트 도구 등을 보관하는 사물함.  

일상생활에 대해 조금

정규 직원의 경우 사무실 부분에 장비를 갖춘 작업장을 임대할 수 있습니다. 수시로 방문하면 데이터 센터 영역 내 모든 편의 시설을 갖춘 임시 호텔에 머물 수 있습니다. 
사무실 부분에는 식당과 주방도 있습니다.  

그리고 숲, 호수, 강, 낚시 및 기타 야외 활동을 포함한 놀라운 자연이 도처에 있습니다. 꼭 방문해 보세요.

약속대로 끝까지 완주한 분들께는 좋은 보너스가 주어집니다. 처음 5개월 동안 Udomlya에서 XNUMXkW의 전력을 공급하는 랙 공간을 무료로 임대할 수 있습니다. 실제로 소비한 전기량에 대해서만 비용을 지불하세요. 신청서를 다음 주소로 보내세요. [이메일 보호].

출처 : habr.com