대기업을 위한 Network-as-a-Service: 비표준 사례

생산을 중단하지 않고 대기업의 네트워크 장비를 업데이트하는 방법? '심장 절개 수술' 모드에서 대규모 프로젝트를 이야기한다. Linxdatacenter 프로젝트 관리 관리자 Oleg Fedorov. 

지난 몇 년 동안 우리는 IT 인프라의 네트워크 구성 요소와 관련된 서비스에 대한 고객 수요가 증가한 것을 확인했습니다. 거의 모든 영역에서 IT 시스템, 서비스, 애플리케이션, 모니터링 및 운영 비즈니스 관리 작업의 연결이 필요해짐에 따라 오늘날 기업은 네트워크에 더 많은 관심을 기울이게 되었습니다.  

요청 범위는 네트워크 내결함성 보장부터 IP 주소 블록 구매를 통한 클라이언트 자율 시스템 생성 및 관리, 라우팅 프로토콜 설정, 조직 정책에 따른 트래픽 관리에 이르기까지 다양합니다.

또한 네트워크 인프라를 처음부터 새로 구축하거나 노후화되어 심각한 수정이 필요한 고객을 중심으로 네트워크 인프라 구축 및 유지 관리를 위한 포괄적인 솔루션에 대한 수요가 증가하고 있습니다. 

이러한 추세는 Linxdatacenter 자체 네트워크 인프라의 개발 및 복잡성 기간과 일치합니다. 우리는 원격 사이트에 연결하여 유럽 내 입지를 확장했으며, 이에 따라 네트워크 인프라를 개선해야 했습니다. 

회사는 고객을 위한 새로운 서비스인 Network-as-a-Service를 출시했습니다. 우리는 모든 고객의 네트워크 문제를 해결하여 고객이 핵심 비즈니스에 집중할 수 있도록 합니다.

2020년 여름, 이 방향의 첫 번째 대규모 프로젝트가 완료되었는데, 이에 대해 말씀드리고 싶습니다. 

처음에는 

대규모 산업 단지는 기업 중 하나에서 인프라의 네트워크 부분을 현대화하기 위해 우리에게 도움을 요청했습니다. 오래된 장비를 네트워크 코어를 포함한 새로운 장비로 교체해야 했습니다.

기업의 마지막 장비 현대화는 약 10년 전에 이루어졌습니다. 기업의 새로운 경영진은 가장 기본적인 물리적 수준에서 인프라를 업데이트하는 것부터 시작하여 연결성을 개선하기로 결정했습니다. 

이 프로젝트는 서버 파크 업그레이드와 네트워크 장비 업그레이드라는 두 부분으로 나누어졌습니다. 우리는 두 번째 부분을 담당했습니다. 

작업의 기본 요구 사항에는 작업 실행 중 기업 생산 라인의 가동 중지 시간을 최소화하는 것(일부 영역에서는 가동 중지 시간을 완전히 제거하는 것)이 포함되었습니다. 중단은 고객에게 직접적인 금전적 손실을 의미하며 어떤 상황에서도 발생해서는 안 됩니다. 시설의 운영 모드가 24x7x365일 뿐만 아니라 기업 실무에서 계획된 가동 중지 기간이 전혀 없다는 점을 고려하여 본질적으로 심장 절개 수술을 수행하는 임무가 주어졌습니다. 이것이 이 프로젝트의 주요 특징이 되었습니다.

가자.

작업은 핵심에서 멀리 떨어진 네트워크 노드에서 가까운 노드로 이동하는 원리와 생산 라인 작업에 덜 영향을 미치는 노드에서 이 작업에 직접적인 영향을 미치는 노드로 이동하는 원리에 따라 계획되었습니다. 

예를 들어 영업 부서의 네트워크 노드를 사용하는 경우 이 부서의 작업으로 인한 통신 중단은 생산에 어떤 영향도 미치지 않습니다. 동시에 그러한 사건은 계약자로서 우리가 해당 장치에 대한 작업을 위해 선택한 접근 방식의 정확성을 확인하고 조치를 조정한 후 프로젝트의 다음 단계를 진행하는 데 도움이 될 것입니다. 

네트워크의 노드와 와이어를 교체하는 것뿐만 아니라 솔루션 전체가 올바르게 작동하려면 모든 구성 요소를 올바르게 구성해야 합니다. 이런 방식으로 테스트한 구성이었습니다. 핵심에서 작업을 시작하면서 우리는 기업 운영에 중요한 위험 영역을 두지 않고 "실수할 권리"를 스스로에게 부여하는 것처럼 보였습니다. 

우리는 생산 프로세스에 영향을 미치지 않는 영역과 중요한 영역(작업장, 하역 장치, 창고 등)을 식별했습니다. 주요 영역에서는 각 네트워크 노드에 대해 허용되는 가동 중지 시간이 별도로 클라이언트와 합의되었습니다. 1분 케이블을 기존 장비에서 새 장비로 물리적으로 전환해야 하고 전환 프로세스 중에 적절한 조치 없이 수년간의 작동 동안 형성된 와이어의 "수염"을 풀어야 하기 때문에 개별 네트워크 노드의 연결 끊김을 완전히 방지하는 것은 불가능했습니다. 주의(케이블 라인 설치 작업을 아웃소싱한 결과 중 하나).

작업은 여러 단계로 나누어졌습니다.

단계 1 – 감사. 팀의 준비 상태에 대한 작업 계획 및 평가에 대한 접근 방식 준비 및 조정: 클라이언트, 설치 계약자 및 우리 팀.

단계 2 – 심층적이고 상세한 분석과 계획을 통해 작업 수행을 위한 형식을 개발합니다. 우리는 포트별 패치 코드 전환 순서까지 작업 순서와 순서를 정확하게 표시하는 체크리스트 형식을 선택했습니다.

단계 3 – 생산에 영향을 주지 않는 캐비닛에서 작업을 수행합니다. 후속 작업 단계에 대한 가동 중지 시간 예측 및 조정.

단계 4 – 생산에 직접적인 영향을 미치는 캐비닛에서 작업을 수행합니다. 작업 최종 단계의 가동 중지 시간 예측 및 조정.

단계 5 – 나머지 장비를 교체하기 위해 서버실에서 작업을 수행합니다. 새 커널에서 라우팅을 시작합니다.

단계 6 – 전체 시스템 복합체(VLAN, 라우팅 등)의 원활한 전환을 위해 기존 네트워크 구성에서 새로운 네트워크 구성으로 시스템 코어를 연속적으로 전환합니다. 이 단계에서 우리는 모든 사용자를 연결하고 모든 서비스를 새 하드웨어로 전송하고 연결이 올바른지 확인하고 엔터프라이즈 서비스가 중지되지 않았는지 확인하고 문제가 발생하면 커널에 직접 연결되는지 확인했습니다. 이로 인해 발생할 수 있는 문제를 해결하고 최종 설정이 더 쉬워졌습니다. 

와이어 수염 헤어스타일

초기 조건이 어려웠기 때문에 프로젝트도 어려웠습니다. 

첫째, 네트워크에는 수많은 노드와 섹션이 있으며, 목적에 따라 복잡한 토폴로지와 와이어 분류가 있습니다. 이러한 "수염"은 캐비닛에서 꺼내어 어떤 전선이 어디에서 어디로 왔는지 알아 내기 위해 힘들게 "빗질"해야했습니다. 

다음과 같이 보였습니다 :

다음과 같습니다 :

또는 이렇게 : 

둘째, 각 작업에 대해 프로세스를 설명하는 파일을 준비해야 했습니다. "기존 장비의 포트 1에서 X선을 가져와서 새 장비의 포트 18에 연결합니다." 간단하게 들리지만 소스 데이터에 완전히 막힌 포트가 48개 있고 가동 중지 옵션(24x7x365 정도를 기억함)이 없는 경우 유일한 방법은 블록 단위로 작업하는 것입니다. 한 번에 오래된 장비에서 더 많은 전선을 뽑아낼수록 더 빨리 전선을 정리하고 새 네트워크 하드웨어에 삽입할 수 있어 네트워크 오류와 가동 중지 시간을 방지할 수 있습니다. 

따라서 준비 단계에서 네트워크를 블록으로 나누었습니다. 각 블록은 특정 VLAN에 속했습니다. 기존 장비의 각 포트(또는 그 하위 집합)는 새 네트워크 토폴로지의 VLAN 중 하나입니다. 우리는 이를 다음과 같이 그룹화했습니다. 스위치 수용 사용자 네트워크의 첫 번째 포트, 중간 – 프로덕션 네트워크, 마지막 – 액세스 포인트 및 업링크. 

이 접근 방식을 사용하면 기존 장비에서 와이어 1개뿐 아니라 10~15개를 한 번에 빼내고 빗질할 수 있습니다. 이로 인해 작업 프로세스가 여러 번 가속화되었습니다.  

그건 그렇고, 빗질 후 캐비닛의 전선은 다음과 같습니다. 

또는 예를 들어 다음과 같습니다. 

2단계를 마친 후, 오류 분석과 프로젝트 역학을 위해 잠시 휴식을 취했습니다. 예를 들어, 우리에게 제공된 네트워크 다이어그램의 부정확성으로 인해 사소한 결함이 즉시 나타났습니다. 다이어그램의 잘못된 커넥터는 잘못 구매한 패치 코드와 이를 교체해야 함을 의미합니다. 

서버 측에서 작업할 때 프로세스의 작은 결함조차 용납될 수 없었기 때문에 일시 중지가 필요했습니다. 목표가 네트워크 섹션의 가동 중지 시간을 5분 이내로 보장하는 것이라면 이를 초과할 수 없습니다. 일정에서 벗어날 수 있는 경우 고객과 합의해야 했습니다. 

그러나 프로젝트를 사전 계획하고 블록으로 나누면 모든 영역에서 계획된 다운타임을 충족할 수 있었고 대부분의 경우 이를 완전히 방지할 수 있었습니다. 

시대의 도전 - 코로나XNUMX 시대의 프로젝트 

그러나 추가적인 어려움이 없지는 않았습니다. 물론 코로나XNUMX도 걸림돌 중 하나였다. 

팬데믹이 시작되면서 작업이 복잡해졌고, 프로세스에 참여한 모든 전문가가 고객 현장에서 작업하는 동안 참석하는 것이 불가능했습니다. 현장에는 설치업체 직원들만 출입이 허용되었고 Zoom 룸을 통해 통제가 이루어졌습니다. 그곳에는 Linxdatacenter의 네트워크 엔지니어와 프로젝트 매니저인 제가, 작업을 담당하는 클라이언트의 네트워크 엔지니어가 있었고, 설치 작업을 수행하는 팀.

작업 중에 설명할 수 없는 문제가 발생하여 즉석에서 조정이 이루어져야 했습니다. 이를 통해 인적 요소(회로 오류, 인터페이스 활동 상태 판단 오류 등)의 영향을 신속하게 방지할 수 있었습니다.

프로젝트 초반에는 원격근무 형식이 이례적이라고 보였지만, 빠르게 새로운 조건에 적응해 최종 작업 단계에 이르렀습니다. 

원활한 전환을 위해 두 개의 네트워크 코어(기존 및 신규)가 병렬로 실행될 수 있도록 네트워크 설정의 임시 구성을 시작했습니다. 그러나 새 커널의 구성 파일에서 한 줄의 추가 라인이 제거되지 않아 전환이 발생하지 않은 것으로 나타났습니다. 이로 인해 문제를 찾는 데 시간이 좀 걸렸습니다. 

메인 트래픽은 제대로 전송됐고, 제어 트래픽은 새로운 코어를 거쳐 노드에 도달하지 못한 것으로 드러났다. 프로젝트를 단계별로 명확하게 구분한 덕분에 네트워크에서 문제가 발생한 구간을 빠르게 파악하고, 문제를 파악하고 해결할 수 있었습니다. 

결과적으로

프로젝트의 기술적 결과 

우선, 새로운 엔터프라이즈 네트워크의 새로운 코어가 생성되었으며 이를 위해 물리적/논리적 링이 구축되었습니다. 이는 네트워크의 각 스위치에 "두 번째 팔"이 있는 방식으로 수행됩니다. 기존 네트워크에서는 하나의 경로, 하나의 암(업링크)을 따라 많은 스위치가 코어에 연결되었습니다. 파손되면 스위치에 완전히 접근할 수 없게 됩니다. 그리고 여러 스위치가 하나의 업링크를 통해 연결되면 사고로 인해 기업의 전체 부서나 생산 라인이 작동하지 않게 됩니다. 

새로운 네트워크에서는 상당히 심각한 네트워크 사고가 발생하더라도 어떤 시나리오에서도 전체 네트워크나 그 중 상당 부분이 중단될 수는 없습니다. 

모든 네트워크 장비의 90%가 업데이트되었고, 미디어 컨버터(신호 전파 미디어 컨버터)가 폐기되었으며, 이더넷 와이어를 통해 전원이 공급되는 PoE 스위치에 연결함으로써 장비에 전원을 공급하기 위한 전용 전력선이 필요하지 않게 되었습니다. 

또한 서버실과 필드 캐비닛의 모든 광학 연결이 모든 주요 통신 노드에 표시됩니다. 이를 통해 현재의 실제 상태를 반영하는 네트워크 장비 및 연결의 토폴로지 다이어그램을 준비할 수 있었습니다. 

네트워크 다이어그램

기술적인 측면에서 가장 중요한 결과는 상당히 대규모의 인프라 작업이 기업 업무에 간섭을 일으키지 않고 직원들에게 거의 눈에 띄지 않게 신속하게 수행되었다는 것입니다. 

프로젝트의 사업 성과

제 생각에는 이 프로젝트는 주로 기술적 측면이 아니라 조직적 측면에서 흥미롭습니다. 어려움은 주로 프로젝트 작업을 구현하는 단계를 통해 계획하고 생각하는 데 있었습니다. 

프로젝트의 성공을 통해 우리는 Linxdatacenter 서비스 포트폴리오 내의 네트워킹 영역을 개발하려는 우리의 이니셔티브가 회사의 개발 벡터에 대한 올바른 선택이라고 말할 수 있습니다. 프로젝트 관리에 대한 책임감 있는 접근 방식, 유능한 전략 및 명확한 계획을 통해 우리는 적절한 수준에서 작업을 완료할 수 있었습니다. 

작업 품질 확인은 러시아의 나머지 사이트에서 네트워크 현대화를 위한 서비스를 계속 제공해 달라는 고객의 요청입니다.

출처 : habr.com