연한 녹색 톤의 여행

상트페테르부르크에서 가장 중요한 교통 문제는 교량입니다. 밤에는 그들 때문에 맥주도 마시지 못한 채 선술집에서 도망쳐야 합니다. 글쎄요, 아니면 평소보다 택시 요금을 두 배로 지불하세요. 아침에는 다리가 닫히자마자 민첩한 몽구스처럼 역에 도착할 수 있도록 시간을 잘 계산하세요. 우리는 "중앙, 역 근처 어딘가에서 밤을 보내는 것"이라는 옵션을 이념적으로 해로운 것으로 간주하지 않습니다.

...5시 30분에 출발하는 "송골매"는 올빼미를 싫어하는 사람들이 발명한 것입니다. 아니요, 물론 아침 270시에 모스크바에 있는 것이 매우 편리하고 상트페테르부르크는 백야 동안 엄청나게 아름답지만 XNUMX시 반에 택시를 탔을 때 고개를 XNUMX도로 돌리고 싶었습니다. 오늘 아침 기차를 발명한 종달새에게 감사드립니다.

DataLine 직원이 우리를 방문하도록 초대했다는 소식을 듣고 저는 “좋은 데이터 센터는 모두 똑같습니다.”라고 생각했습니다.

밝혀진 대로, 각 데이터 센터는 나름대로 좋은(또는 나쁜) 부분이 있습니다. 특히 큰 성공을 거두면 해당 지역의 모든 갈퀴를 수집하고 자신의 것(그리고 조금은 다른 사람의 것)으로부터 교훈을 얻습니다. ) 풍부한 경험. 그래서 우리(XNUMX개의 주요 linkmeup과 그들의 친구 및 동조자로 구성됨)는 OST 및 NORD 데이터 센터가 얼마나 좋은지(또는 좋지 않은지) 확인하기로 결정했습니다.

도로에서 약간의 작업을 수행한 후(여기에는 한 이동통신사에 대한 광고가 있을 수 있지만 아니요 - 적용 범위는 여전히 나빴습니다) Leningradsky 역에서 하차했습니다. 글쎄, 적어도 Gazmanov 아래에서는 아닙니다.

우리는 얼마 전에 "불타버린" "동일한" OST와 함께 "라임" 데이터 센터 투어를 시작했습니다. 따옴표로 묶인 이유 - 이후. 그 동안 우리는 서서 담배를 피우며 늦은 사람들을 기다립니다. 옆에 있는 RT 사무실 사진 찍기. 이 동네에는 고위 인사가 도착하기 전에 아스팔트를 새로 깔고 연석을 칠하는 것에서부터 배지가 유사하다는 이유로 Dataline 주민들에게 제공되는 인근 카페 할인에 이르기까지 재미있는 이야기가 많이 있습니다.

전체주의 선전의 대변자

엄격한(액세스) 모드의 데이터 센터

패스, 행동 규칙, 입구의 고기 분쇄기 - 우리가 본 것과 거의 동일합니다. Linxdatacenter 여행 중. 데이터센터에 많은 커피숍을 보셨나요? 이제 우리는 한 쌍을 알고 있습니다. 직원과 고객의 배지에는 정기적으로 보충되는 "커피" 예금이 있습니다. 따라서 합리적인 한도 내에서 완전히 무료로 커피를 즐기실 수 있습니다. 친애하는 손님으로서 우리도 식사를 대접 받았습니다.

커피에 대해 나쁘게 말할 수는 없습니다. "체인"커피 숍에서는 매우 정상적이지만 위치는 무의식적으로 매력적이며 인테리어는 최고의 현대 전통과 일치합니다.

동네 커피숍 인테리어

사진은 NORD 데이터 센터를 보여줍니다.

투어는 사무실에서 시작됩니다. Runet 전체에 알려진 벽의 비문과 흰색과 라임 색 구성표 외에도 모든 종류의 재미있는 것들이 있습니다. 이것은 기업 극장 공연에서 남은 소품입니다. 데이터 센터 네트워크의 기술 책임자가 연극에서 연기하는 것을 상상할 수 있습니까? 그리고 우리는 그를 개인적으로 알고 있습니다.

그리고 진실

공연 사진

데이터 센터(또는 XNUMX개의 데이터 센터)는 지난 세기 이전에 건설된 산업 건물 단지(당시에는 시트로엥 공장, 소련 시대에는 Gidroprivod 공장)에 위치해 있으므로 한편으로는 가혹한 환경이 있습니다. 인더스트리얼룩, 금속빔, 로프트 분위기, 다양한 시대의 산업 유물이 여전히 다양한 작품에서 발견됩니다. 반면, 데이터 센터의 밀폐 구역은 기존 구조에 맞춰야 하며 때때로 현실과의 타협이 이루어져야 합니다. 그러나 이러한 타협이 품질에 영향을 미쳤다고는 말할 수 없습니다. 하지만 아마도 그 사람들은 디자인하는 동안 열심히 일해야 했을 것입니다. 또한 소문에 따르면 Metro-2가 근처 어딘가를 지나가지만 확실하지 않습니다.

극장 외에 박물관도 있습니다. 전시물, 자연적으로 - 고고학적 발견물

에 대해 몇 마디 불. 그렇습니다. 건물(또는 지붕)에 실제로 불이 붙었습니다. 냉각 시스템과 콜드 파이프의 외부 장치가 손상되었습니다. 어딘가에서 배선이 끊어지고 에어컨에 전기가 공급되지 않았습니다. 프레온 파이프가 어딘가에서 폭발했습니다. 그러나 그럼에도 불구하고 밀폐 구역은 쏟아지는 엄청난 양의 물을 견뎌냈고 장비는 살아 남았습니다. 그들은 전 세계 최고 경영진이 대표하는 "본부"의 통제하에 그것을 복원했습니다. 그들은 모스크바와 주변 지역의 모든 구리 파이프를 긁어 모았습니다 (밤에는 BMW X5로 가져 오기도했습니다). 설치자. 손상된 데이터홀의 중요 장비(화재로 인해 손상된 것이 아니라 추위로 인해 손상됨!)를 신속하게 다른 홀로 옮겨 오전 XNUMX시가 되면 모든 서비스뿐만 아니라 고객도 가동될 수 있었습니다.

우리는 "가장 고통받은" 홀을 직접 점검했습니다. 타는 냄새와 이중 바닥 타일을 교체한 것 외에는 화재를 연상시키는 것은 전혀 없습니다(다른 데이터 홀로 "일시적으로" 옮겨진 장비 랙 제외, 그리고 거기에 머물렀다).

상태 패널

복도를 따라 걷다 보면 데이터 센터의 터빈실 다이어그램과 매우 유사한 터치 디스플레이를 볼 수 있습니다. 상태 패널입니다. 복도에는 에어컨이 많이 있으며 이를 통해 현장 엔지니어는 예를 들어 필요한 에어컨을 신속하게 찾고 현재 상태를 보고할 수 있습니다.

모니터링은 Nagios(이미 여러 개의 독립 클러스터가 있음)를 기반으로 구축되었으며 모든 데이터 센터(OST 및 NORD)를 포괄합니다. 또한 Android 및 iOS(클라이언트 및 직원용)용 애플리케이션과 웹사이트에 바로 상태 페이지가 있습니다.

디스플레이에서 PUE가 비정상적으로 높은 것을 발견했습니다. 러시아 전역에서는 허용되지 않지만 여전히 1.90은 다소 높습니다. 이에 대한 대답은 순전히 경제적인 것입니다. 2012~2013년에는 데이터 센터의 랙이 불티나게 팔렸기 때문에 감성과 에너지 효율성에 집중할 시간이 없었습니다. 우리는 시장에 있는 것을 설치하고, 가능한 한 빨리 설치하며, PUE에 전혀 신경 쓰지 않습니다. 이유가 무엇입니까? 설계 단계에서도 랙의 80~90%가 구매되지만 러시아 연방 법률에서는 에너지 효율성에 대해 아무것도 알고 싶어하지 않습니다. 암스테르담의 일부 위원회는 그러한 수치에 만족할 것입니다.

개인적이지 않은 일. 그냥 사업.

또 다른 특징은 데이터 홀 표시입니다. 각 사이트의 데이터 홀에는 "공식" 영숫자 인코딩 외에도 해군 알파벳(Alpha-Bravo-Charlie-Delta...)의 "인간" 가명이 있습니다. 어떤 이유에서인지 모든 고객은 위스키 룸을 좋아합니다.

고객 관리에는 작은 세부 사항이 없습니다.

이러한 "울타리"는 일부 고객을 위해 세워졌습니다. 터빈실에서는 사진 촬영이 금지되어 사진은 DataLine ©입니다.

DataLine의 고객은 대부분 존경받는 대기업이므로 장비 사진 촬영을 별로 좋아하지 않습니다. 또한 고객의 이름(또는 로고)이 카운터에 직접 큰 글자로 적혀 있는 경우도 있습니다. 그들은 그것을 좋아하지 않습니다. 그게 전부입니다. 따라서 우리는 다양한 비문과 엔지니어로 이미 유명한 벽을 촬영했습니다. 전체 엔지니어의 사진을 찍는 것도 불가능하고 모든 곳에서 사진을 찍는 것도 불가능하지만 우리는 시도했습니다. 우리의 고객은 규모가 크고 존경받기 때문에 특수 랙(또는 여러 공급업체 랙의 일종의 우버 스토리지 시스템), 자체 울타리, 자체 액세스 제어 시스템, 자체 비디오 감시 및 신속한 대응 팀과 같은 특정 요청도 있습니다. 기관총. 일반적으로 DataLine의 암묵적인(그리고 공개적인) 규칙 중 하나는 고객을 돌보고 그에게 좋은 일을 하는 것입니다. 조끼와 인터넷 접속 및 충전기를 갖춘 워크스테이션부터 클라이언트를 위한 다양한 이벤트까지. 후자는 회사에서 회사로 이동하는 동일한 사람들이 DataLine으로 데려온다는 점에서도 매우 유용합니다. 이곳의 모든 것이 아늑하고 편리하며 신뢰할 수 있기 때문입니다. DataLine의 사업은 단지 랙 공간을 임대하는 것이 아닙니다. 이것은 또한 152-FZ와 PCI-DSS에 따라 동시에 인증된 클라우드이며(우리는 이에 대한 팟캐스트를 만들 예정이며 발표를 계속 지켜봐 주시기 바랍니다) 연결(사이트 간 및 각 사이트에서 사이트 간 자체 광섬유)을 제공합니다. M9, 도시를 가로지르는 자체 광학 링 등 고객 사무실까지의 마지막 마일이 조직될 때까지).

M - 동기부여

비문에 관해 말하면, 아이디어는 직원뿐만 아니라 파트너 및 고객으로부터도 나오며, 그 후 가장 성공적인 아이디어에 투표할 수 있습니다. 공식 페이지 FB의 DataLine. 음, 거기에서 아이디어를 제안할 수 있습니다.

엘베 회의

크로스(사진 제공: DataLine)

우리는 교환원이 있는 Meet-Me-Room에 들릅니다. MMR(OST에는 기본 광 입력 수에 따라 능동 및 수동의 세 쌍이 있음)에서는 모든 데이터 홀의 연결이 결합됩니다. 크로스 컨트리 신발에서는 모든 것이 지루하고 깔끔합니다. 그러나 활성 카메라가 있는 곳에서는 와이어와 다양한 장비(DLink, Extreme, Juniper, Mikrotik... 등 최대 ASR18k까지)로 만든 국수와 같은 일부 BM9의 최고 시절과 영상을 기억할 수 있습니다. 여기에는 XNUMX명이 넘는 운영자가 있으므로 모든 것이 다채롭습니다. MMR에서 광학 장치와 구리선이 기계실로 배포됩니다. 각각에 대해 최소 두 개의 경로(변형 가능)가 있으므로 연결 안정성에 대해 걱정할 필요가 없습니다. MMR은 "엘베"라고 하는데, 꽤 미묘합니다.

IBM Power는 없나요?

또 다른 발견은 IBM P 시리즈인데, 한 번도 켜지 않은 채 몇 년 동안 복도에 서 있었습니다. 고객 중 한 명이 머신(테이프 라이브러리 및 스토리지 시스템 포함)을 주문했지만 "유용하지 않아서" 데이터 센터에 기증했습니다. 그 이후로 계속 서 있습니다.

부자가 되어 이런 선물을 주는 것도 좋을 것 같죠? (아니면 선물을 안 주고 잊어버렸을 수도 있고, 카드로 졌을 수도 있지만 오래전부터 있었던 것 같아요.)

NORD-4에 서 있는 잘생긴 남자

우리는 에너지 센터로 이동합니다. 각 데이터 센터마다 30개(또는 40개)의 디젤 발전기 세트가 있습니다(OST에는 그 중 1900개가 있음을 상기시켜 드립니다). 디젤 엔진은 1~12초 안에 최대 출력에 도달하고 2.5kVA를 생산합니다. N+85 중복성, 동기화 등이 포함됩니다. OST에서 디젤 엔진에 앉아 있는 가장 긴 시간은 XNUMX시간입니다. NORD - XNUMX일(결국 XNUMX톤의 저장 시설은 많은 돈이 아닙니다).

물론 연료 공급을 위해 다양한 연료 회사와 계약이 체결되어 있습니다. 디젤로의 전환은 정기적으로 이루어지므로 연료가 모두 생산되고 계약이 확인됩니다. 그런데 NORD의 동료들에 따르면 디젤 엔진에서 뜨거운 공기가 배출되는 곳에서 보통 XNUMX시간 이상 걸리는 디젤 발전기 세트를 테스트할 때 겨울에도 잔디가 녹색으로 변한다고 합니다.

익숙한 커피숍에서 간단한 간식을 먹은 후 NORD 사이트로 향합니다. 이것은 또한 하나의 데이터 센터가 아니라 동일한 영역에 있는 1개의 독립된 건물입니다. 각각에는 자체 전기 입력, 자체 디젤 엔진 및 자체 냉각 장치가 있습니다. NORD-2 및 NORD-4는 Uptime Institute M&O의 감사를 받았습니다. 최신(그리고 최고의 DataLine 데이터 센터)은 NORD-XNUMX이므로 우리가 갈 곳은 바로 여기입니다.

모스크바에는 겉보기에 엄청난 수의 데이터 센터가 있음에도 불구하고 여전히 부족합니다. 아니요, 물론 4~5개의 랙도 문제없이 배송됩니다. 그들은 심지어 당신에게 2020을 줄 것입니다. 더 많은 것이 문제입니다(그리고 DataLine에는 그러한 요구 사항을 가진 한두 명 이상의 고객이 있습니다). 특히 NORD-XNUMX에는 한 대규모 클라이언트가 새로 구축된 자체 데이터 센터로 이전했기 때문에 (현재) 장소가 있지만 다른 곳에서는 운이 좋지 않을 수 있습니다. 그러나 NORD-XNUMX의 설계는 현재 본격화되어 XNUMX년 초에 출시될 예정이다.

하지만 우리 여행으로 돌아가자. 우리는 자동차로 여행하고 있었기 때문에 그들은 우리를 관문으로 들여 보냈고 기관총 사수들이 우리를 겨냥하고 신청서로 우리의 차량 번호를 확인하고 모든 승객에게 (물론 여권을 가지고) 나가서 패스를 받으라고 요청했습니다. B는 보안이기 때문입니다.

NORD-4는 회사의 자부심이자 데이터 센터 건설 및 운영에 대한 다년간의 경험을 모아 놓은 것입니다. 설계 프로젝트 및 시설(예: 데이터 센터 구축)에 대한 Uptime Institute Tier III 인증서는 물론 운영 지속 가능성도 보유하고 있습니다. -사람들은 책임감있게 문제에 최대한 가깝게 접근했습니다. 내부에는 서로 독립적인 XNUMX개의 밀폐 구역이 있으며, 각각 한 건물 안에 XNUMX개의 홀이 있습니다. 각 발전소에는 자체 전력 센터(디젤 발전기 세트, 배터리실), 냉각 회로 및 소화 시스템이 있습니다. 일반 - 광학 입력(건물당 XNUMX개 있음) 및 MMR.

건강한 엔지니어 모딩

데이터센터 입구에는 이미 우리에게 익숙한 커피숍이 기다리고 있다. 우리는 모니터링 센터로 올라갑니다. 이제 OST와 NORD-4의 두 가지 주요 항목이 있습니다(NORD-1,2,3에도 자체 업무 교대가 있습니다). 각 센터에서 두 사이트를 모두 볼 수 있으므로 여기서도 중복성 n+1이 보장됩니다. 비디오 월에는 이미 밝은 녹색 색상의 익숙한 대시보드가 ​​있습니다(물론 상태 디스플레이보다 훨씬 더 많은 매개변수가 있습니다). 우리는 모니터링에 관해 약간의 대화를 나눕니다. 멋진 Prometheus와 Grafan은 없고 Nagios만 있고 하드코어 및 집에서 만든 시각화만 있습니다. XNUMX년(그러나 그 이상)을 사용하면서 많은 사용자 정의 검사와 스크립트가 이미 작성되었으므로 다른 것으로 전환하는 것은 도박처럼 보입니다. 한 달에 한 번 정도 모든 문제를 "신속하고 고통 없이" 해결하겠다고 제안하는 또 다른 회사가 나타납니다. 하지만 아직까지는 문제가 해결되지 않습니다. 그런데 비디오 월은 자체 조립 솔루션에서도 작동하며 상업용 아날로그보다 몇 배 더 저렴합니다.

지역 통제 센터

수년 동안 데이터 센터를 설계, 구축 및 운영해오면 기성품을 구입하는 것보다 직접 무언가를 하는 것이 더 이상 두렵지 않습니다. 예를 들어 DataLine은 단순히 규모 때문에 실수의 최대치를 밟았으며 각각의 새로운 데이터 센터는 XNUMX년 이상 계속된 어려운 실수와 경험의 결과라고 주저하지 않습니다. . 물론 신규 데이터센터마다 노하우가 있고, NORD를 둘러보면서 사람들이 그냥 해냈고, 잘 했다는 생각이 들 때가 있다. 과시하기 위한 것도 아니고 등급이나 인증서를 위한 것도 아닙니다. 각 반복에서 자신보다 더 성장하고 점점 더 나아지는 일반적인 엔지니어링 프로세스입니다. 외부 관찰자는 이것이 지루하고 보수적이라고 말할 것이지만 고객은 반대로 자신의 돈으로 그러한 안정성을 유지합니다. 그리고 그것을 잘 수행하기 위해 엔지니어링 시스템이나 소프트웨어를 많은 돈으로 구입할 필요가 전혀 없습니다 (때로는 그것 없이는 할 수 없지만). 경험, 지식 및 엔지니어링 독창성이 결정되는 경우가 많습니다.

예를 들어 NORD-4 건물은 3,5층입니다. 처음 4.5개는 천장이 1.8미터로 터빈실이 위치한 본격적인 건물입니다. 그리고 마지막 것은 기술적이며 높이가 XNUMXm에 불과하며 순전히 냉각 시스템 전용입니다. 바닥은 기술적이기 때문에 요구 사항이 훨씬 낮아서 프로젝트가 단순화되고 비용이 절약됩니다.

삼각형 데이터 센터의 모습

맥스는 사진 속에서 화상을 입지 않는 특별한 쿵푸 능력을 가지고 있습니다.

우리는 옥상에서 투어를 마무리합니다. 여기에서 인근 화력 발전소와 주거 지역은 물론 다른 NORD 건물의 멋진 전망을 볼 수 있습니다. 그 중 두 개는 삼각형입니다. 이에 대해 동료들은 "DataLine은 바보입니다. 어떤 이유로 삼각형 데이터 센터를 구축하고 거기에 삼각형 랙과 삼각형 서버를 설치하고 있습니다"라고 웃기까지했습니다. 그러나 아무것도 없습니다. 그들은 건설하고 성공적으로 운영하는 동시에 기존 영토를 효과적으로 사용합니다 (모스크바에서는 무료가 아닙니다). 또 다른 놀라운 사실은 대부분의 상업 고객이 모스크바에 위치하기를 원한다는 것입니다. 민스크 고속도로를 따라 XNUMXkm 떨어진 사이트(필요한 용량과 통신이 모두 있더라도)는 더 이상 누구에게도 관심이 없습니다. 그래서 모두가 고무가 아닌 곳에 모여 있습니다.

냉각탑은 더 이상 데이터센터가 아니라 화력발전소입니다.

이것으로 우리의 다음 여행은 끝났습니다.

그 후 공동 계획과 향후 팟캐스트에 관해 또 다른 길고 생산적인 대화가 이어졌습니다(오래 기다리지 않기를 바랍니다). 곧 더 흥미로운 일이 있을 것이므로 계속 지켜봐 주시기 바랍니다.

글쎄요, 모든 것을 자신의 눈으로 보고 싶다면 DataLine이 여러분을 투어에 초대합니다. 완전 무료이지만 예약이 필요합니다. 코드워드를 "linkmeup"이라고 부르는 사람은 카르마에 플러스를 얻게 됩니다.

계속 지켜봐!

출처 : habr.com