데이터 센터 모니터링: 기존 BMS를 새 BMS로 교체한 방법 3 부

우리는 데이터 센터의 BMS 시스템을 어떻게 변경했는지에 대한 이야기를 계속합니다(일부 1, 일부 2). 동시에 우리는 단순히 한 공급업체의 솔루션을 다른 공급업체로 교환하는 것이 아니라 처음부터 우리의 요구 사항에 맞는 시스템을 개발했습니다. 이야기가 끝나면 완료된 작업 결과와 귀하에게 유용할 수 있는 흥미로운 솔루션을 공유합니다.

새로운 인터페이스

여기서 그들이 말했듯이 한 번 보는 것이 좋습니다.

랙.

차이점을 살펴보겠습니다.

• 첫째,입니다 красиво 편안한. PDU 모듈("뱅크" 또는 간단히 "뱅크")의 부하와 쌍을 이루는 모듈의 병렬 부하 합계를 추적하는 것이 얼마나 쉬워졌는지 확인하세요. 새 BMS의 랙 모델에서는 아래쪽 쌍의 PDU 모듈이 과부하되고(총 전류가 허용되는 16A - "파란색" 알림보다 높음) 위쪽 PDU 모듈이 저부하되는 것을 즉시 확인할 수 있습니다. 입력 중 하나가 연결 해제되면 전체 부하가 두 번째로 전환되고, 전원이 공급된 상태로 남아 있는 하위 모듈은 과부하로 인해 꺼집니다. 이를 방지하기 위해 데이터 센터 지원 서비스는 클라이언트에게 사전에 경고하고 부하를 재분배하는 방법에 대한 권장 사항을 보냅니다.
• 장비 추가가 용이합니다. 새로운 BMS에서는 모듈 전류 및 랙 전력 합계에 대한 가상 센서가 이미 표준 랙 템플릿에 추가되어 있으며 랙에 PDU를 추가한 후 자동으로 생성됩니다. 기존 BMS에서는 수동으로 생성한 후 지도로 드래그해야 했기 때문에 '인적 요소'로 인한 오류 가능성이 높아졌습니다.
• 창조성을위한 무한한 범위. 이제 가상 센서를 생성할 때 제한이 없습니다. 모든 변수에 대해 어떠한 수학적 모델이라도 구축할 수 있습니다. 이는 복잡한 가상 센서를 생성하고(이전에는 값만 추가할 수 있음) 엔지니어링 시스템 성능의 통계 및 추세를 더 잘 분석할 수 있는 능력이 있음을 의미합니다. 이를 통해 시스템 구성, 장비 교체 및 리소스 관리와 관련된 의사 결정의 품질이 향상됩니다. 
• 명확한 인터페이스. 새 인터페이스에는 어수선한 아이콘도 없고, 팬도 돌아가고, 스위치가 '클릭'하는 일도 없습니다. 그리고 가장 편리한 점은 랙 내부의 PDU Line A/B 상태를 표시하는 기능입니다. 우리는 기존 BMS에서도 비슷한 작업을 시도했지만 지도의 제곱센티미터당 병합된 아이콘 수가 너무 많아 이를 포기할 수밖에 없었습니다.

이제 다음을 살펴보는 것이 좋습니다.

섬기는 사람.

주 배전반의 조각.

환기 제어판.

그리고 새로운 BMS는 새해를 맞이하여 장식될 수 있습니다 :)

한 페이지 - 말이나 기술 사양 없이 상호 이해

오랫동안 우리는 BMS에 또 다른 "트릭"을 구현하고 싶었습니다. 즉, 데이터 센터의 주요 매개변수를 한 페이지에 모아 화면을 한 번 보는 것만으로도 주요 시스템의 상태를 평가하기에 충분하도록 하는 것입니다. 그러나 우리는 그것이 어떤 모습이어야 하는지 완전히 이해하지 못했습니다.

새로운 BMS 개발이 시작되기 전부터 우리는 네덜란드에 있는 XNUMX개 데이터 센터를 여행으로 방문했습니다. 목표 중 하나는 그러한 페이지 구현의 예를 보는 것이었습니다.

그리고 단 하나의 데이터 센터도 우리에게 이를 보여주지 않았습니다. 일부에서는 존재하지 않았고 다른 곳에서는 "지금 개발 중"이었고 다른 곳에서는 "큰 영업 비밀"이었습니다. 따라서 새로운 BMS 생성을 위한 참고 사항에는 이 매우 중요한 페이지에 대한 정확한 설명이 없습니다.

그 결과, 우리는 말 그대로 "즉석에서" 이를 생각해냈습니다. 바로 그 순간 나는 데이터센터에 있는 동료들과 원격으로 상담을 해야 했다. 흩어져 있는 데이터를 찾기 위해 휴대폰으로 BMS 페이지를 스크롤하는 것이 매우 불편했고, 실제로 첫 번째 버전은 냅킨에 스케치한 것이었습니다. 한 페이지. 사진을 기반으로 개발자가 구현했습니다. 

신중한 네덜란드 동료들의 예에 따라, 특히 각 데이터 센터가 고유하고 이를 복사할 이유가 없기 때문에 메인 페이지의 최종 버전을 보여주지 않을 것입니다. 그러나 그 형성의 두 가지 주요 원칙을 설명하겠습니다.

1. 스마트폰 세로형 화면(혹은 모니터이지만 세로형 레이아웃을 유지함)의 형식에 맞게 디자인되어 중요한 정보가 한 화면에 모두 표시되는 표입니다. 표 위에는 진행 중인 사건의 '요약'이 표시되므로 세로 형식으로 함께 배치하는 것이 가장 편리했습니다. 
2. 테이블의 셀 배열은 데이터 센터의 아키텍처(물리적 또는 논리적)를 따릅니다. 우리는 언뜻 보기에 바람직한 것처럼 알파벳 순서로 시스템을 배열하는 것을 포기했습니다. 이 시퀀스는 마치 모든 공간과 시스템을 물리적으로 모니터링하는 것처럼 데이터 센터 직원의 시각적 연관성을 반영합니다. 이렇게 하면 정보를 더 쉽게 찾을 수 있습니다.

실제로 이제 데이터센터의 모든 핵심 특성은 담당 엔지니어와 관리자의 스마트폰/모니터 한 화면에 그룹화되어 표시되며, 데이터센터의 물리적, 논리적 지형과의 연결이 구현됩니다. 

다음은 첫 번째 초안의 사진입니다. 물론 이 버전은 다시 생각되고 완성되었습니다.

확인 및 사건 요약

모니터링 시스템 업데이트 프로젝트의 결과로 등장한 또 다른 새로운 개념에 대해 이야기하겠습니다.

핸드셰이크는 새로운 BMS 개발자가 제안한 다소 드문 용어입니다. 이는 운영자가 사건을 목격하고 이를 인정했으며, 이를 해결하기 위한 책임을 수락했음을 확인하는 것을 의미합니다.  

그 단어는 고착되었고 이제 우리는 사건을 "인정"합니다.

새로운 BMS의 기본 버전에 포함된 알고리즘은 우리에게 적합하지 않았습니다. 실제로 이는 이벤트 로그에 대한 설명이었습니다. 즉, 해결된 인시던트가 로그에서 사라지지 않았고 승인된("확인된") 인시던트가 새 인시던트에서 정렬되지 않았습니다.

결과적으로 "요약"이라는 창이 개발되었으며, 그 내용은 다음과 같습니다.

1. 활성 인시던트와 서비스 모드의 장치만 표시됩니다(상업용 파란색 알림 없음).
2. 새로운 사건과 승인된 사건 사이에는 명확한 차이가 있습니다.
3. 사건을 수락한 사람이 표시됩니다.

새로운 BMS의 직무 담당자에 대한 작업 알고리즘은 다음과 같습니다.

1. 새로운 사건이 보고서에 포함되어 승인을 기다리고 있습니다. 이 구역에는 오랫동안 머물 수 없으며, 장비 담당자가 즉시 사건을 처리해야 합니다.
2. 직원은 오른쪽 체크 표시를 클릭하여 사건에 대한 책임을 집니다. 모든 직원은 고유한 계정에 속하므로 누가 사건을 수락했는지 자동으로 표시됩니다. 필요한 경우 의견을 남겨주세요.
3. 해당 사건은 '확인' 항목으로 이동되며, 나머지 담당직원과 관리자는 해당 사건이 해당 직원에 의해 처리되고 있음을 이해합니다.

새로운 메시지와 이미 확인된 메시지가 포함된 요약 창의 예.

요약 창을 한 페이지 테이블과 연결하여 전체 내용을 얻었습니다. 메인 화면 즉시 확인할 수 있는 BMS 시스템: 

• 주요 데이터 센터 시스템의 상태;
• 처리되지 않은 새로운 사건의 존재;
• 승인된 사건의 존재 및 이를 구체적으로 제거한 사람에 대한 정보.

브라우저 액세스 및 전화 팝업 알림

전 세계 어디에서나 모든 장치에서 액세스할 수 있는 웹 인터페이스는 외부 사용자에게 완전히 폐쇄된 "thick" 클라이언트와는 극명한 대조를 이룹니다. 

기존 접근 방식에는 모니터링 서비스 직원을 위한 원격 작업 구성 문제부터 데이터 센터의 직원 워크스테이션에 있는 배포 키트의 "두꺼운" 클라이언트를 설치해야 하는 문제까지 다양한 불편함이 수반되었습니다.

이제 BMS의 모든 페이지에는 고유한 주소가 있으므로 페이지나 장치의 직접 주소뿐만 아니라 고유한 그래프/보고서에 대한 링크도 공유할 수 있습니다. 

시스템에 대한 액세스는 이제 Active Directory를 통한 LDAP 인증을 통해 수행되므로 보안 수준이 향상됩니다. 

오늘날 이동성은 근무 중인 엔지니어의 품질 작업에 있어 핵심 요소입니다. 근무조실에서의 모니터링 모니터링 외에도 엔지니어들은 근무실 외부에서 순회, 일상적인 작업을 수행하며, 모바일 화면에 최적화된 BMS 메인 화면 덕분에 터빈실에서 일어나는 일을 통제력을 잃지 않습니다. 잠시 동안. 

작업 채팅 기능 덕분에 제어 품질도 향상되었습니다. 근무 중인 엔지니어의 서신을 BMS에 "연결"하여 작업 프로세스 속도를 높입니다. 예를 들어, 우리는 Teams 애플리케이션을 사용하여 내부 서신을 수행하고 팝업 푸시 알림 형태로 휴대폰에서 BMS의 모든 메시지를 받을 수 있으므로 담당 직원이 계속해서 휴대폰을 볼 필요가 없습니다. 화면.

 스마트폰 화면에 푸시 알림이 뜹니다.

Teams 앱에서 알림이 표시되는 방식입니다.

동시에 팝업 알림은 사건 발생에 대한 메시지에 대해서만 구성되어 산만함 요인을 최소화합니다. 직원은 Teams 푸시 알림이 스마트폰 화면에 나타나면 BMS 페이지로 이동해야 함을 알고 있습니다. 그리고 그 사건을 받아들인다. 사고 해결 메시지는 BMS 페이지에서 추적됩니다.

사진은 스마트폰의 BMS 인터페이스를 보여줍니다.

최대 합계

이전 공급업체의 BMS를 업데이트하는 데 드는 비용은 처음부터 새로운 시스템을 개발하는 것과 비슷했지만(약 $100), 제품 기능의 차이는 엄청났습니다. 우리는 비즈니스 업무와 프로세스에 최적화된 유연한 시스템을 받았습니다. 또한 지속적인 시스템 지원 및 업그레이드 비용을 크게 절감했습니다. 

하지만 물론 어려움도 있었습니다. 

• 첫째, 우리는 새 BMS의 기본 버전에 적용해야 하는 변경 사항의 양을 과소평가했으며 사전 합의된 기한을 지키지 못했습니다. 우리에게는 이것이 중요한 문제가 아니었습니다. 왜냐하면 우리는 마지막 순간까지 보험에 가입하고 기존 시스템에서 작업했으며 프로세스가 창의적이고 복잡하여 때로는 예상보다 느리게 진행되었기 때문입니다. 또한 우리는 개발자가 최상의 결과를 얻기 위해 모든 노력을 기울이는 것을 항상 보아 왔습니다. 하지만 사실 이야기가 너무 길어져서 우리 핵심 전문가들이 계획했던 것보다 훨씬 더 많은 노력과 시간을 투자했습니다. 
• 둘째, 가상 머신 및 통신 채널을 예약하기 위한 알고리즘을 디버그하기 위해 여러 단계의 테스트가 필요했습니다. 처음에는 BMS 시스템 측면과 가상 머신 및 네트워크 설정 측면 모두에서 오류가 발생했습니다. 이 디버깅에도 시간이 걸렸습니다. 다행스럽게도 계약업체에는 클라우드 서비스 형태의 테스트 플랫폼이 제공되어 모든 설정과 혁신이 초기에 테스트되었습니다.
• 셋째, 결과 시스템은 최종 사용자가 편집하기가 더 어려워졌습니다. 이전에 지도가 쉽게 변경하거나 이동할 수 있는 배경(그래픽 파일)과 아이콘으로 구성되어 있었다면 이제는 특정 편집 기술이 필요한 애니메이션이 포함된 복잡한 그래픽 인터페이스입니다.

우리 BMS 시스템의 급격한 업데이트는 이미 작년의 가장 중요한 프로젝트라고 할 수 있으며, 이는 향후 우리 사이트의 운영 관리 품질에 심각한 영향을 미칠 것입니다. 

물론 우리는 오래된 철 서버를 버리지 않고 "가벼워졌습니다". 수천 개의 "상용" 가상 센서와 PDU를 제거하고 디젤과 같은 가장 중요한 장치 수십 개만 남겨 두었습니다. 발전기 세트, UPS, 에어컨, 펌프, 누출 센서 및 온도 이 모드에서는 이전 속도가 회복되어 "예비 예비군"이 될 수 있습니다. 그런데 이전 BMS에서 PDU를 제거한 후 약 1000개의 불필요한 라이센스를 확보했습니다. 이를 어떻게 해야 하는지 알고 계십니까?

출처 : habr.com