Hvernig á að uppfæra netbúnað í stóru fyrirtæki án þess að stöðva framleiðslu? Um umfangsmikið verkefni í ham "opinn hjartaskurðaðgerð" segir Verkefnastjóri Linxdatacenter Oleg Fedorov.
Undanfarin ár höfum við séð aukna eftirspurn frá viðskiptavinum eftir þjónustu sem tengist nethluta upplýsingatækniinnviða. Þörfin fyrir tengingu upplýsingatæknikerfa, þjónustu, forrita, eftirlitsverkefna og rekstrarstjórnunar fyrirtækja á nánast hvaða svæði sem er, neyða fyrirtæki í dag til að veita netkerfum aukna athygli.
Beiðnir eru allt frá því að veita netbilunarþol til að búa til og stjórna sjálfstætt kerfi viðskiptavinar með öflun á blokk af IP tölum, stilla leiðarsamskiptareglur og stjórna umferð í samræmi við stefnu stofnana.
Það er einnig vaxandi eftirspurn eftir samþættum lausnum fyrir byggingu og viðhald netinnviða, fyrst og fremst frá viðskiptavinum sem hafa netinnviði til frá grunni eða eru úreltir, sem þarfnast alvarlegra breytinga.
Þessi þróun féll í tíma saman við þróunar- og flækjutímabil eigin netkerfis Linxdatacenter. Við víkkuðum út landafræði veru okkar í Evrópu með því að tengjast fjarlægum stöðum, sem aftur krafðist endurbóta á innviðum netsins.
Fyrirtækið hefur hleypt af stokkunum nýrri þjónustu fyrir viðskiptavini, Network-as-a-Service: við sjáum um öll netverkefni fyrir viðskiptavini, sem gerir þeim kleift að einbeita sér að kjarnastarfsemi sinni.
Sumarið 2020 lauk fyrsta stóra verkefninu í þessa átt sem mig langar að tala um.
Í byrjun
Stór iðnaðarsamstæða leitaði til okkar vegna nútímavæðingar á nethluta innviða í einu af fyrirtækjum þess. Það þurfti að skipta út gamla búnaðinum fyrir nýjan, þar á meðal kjarna netsins.
Síðasta nútímavæðing búnaðarins hjá fyrirtækinu átti sér stað fyrir um 10 árum. Ný stjórn fyrirtækisins ákvað að bæta tengingar, byrja með uppfærslu innviða á grunnvirkasta, líkamlega stigi.
Verkinu var skipt í tvo hluta: uppfærslu á netþjónagarði og netbúnaði. Við vorum ábyrg fyrir seinni hlutanum.
Grunnkröfur fyrir vinnuna voru meðal annars að lágmarka niður í miðbæ framleiðslulína fyrirtækisins meðan á framkvæmd verksins stóð (og á sumum sviðum, algjörlega útrýming niður í miðbæ). Öll stöðvun er beint peningalegt tap viðskiptavinarins, sem hefði ekki átt að gerast undir neinum kringumstæðum. Í tengslum við rekstrarham aðstöðunnar 24x7x365, auk þess að taka tillit til algjörrar fjarveru tímabila fyrirhugaðrar niður í miðbæ í starfi fyrirtækisins, fengum við það verkefni í raun að framkvæma opna hjartaaðgerð. Þetta varð helsta sérkenni verkefnisins.
Farðu
Verkin voru skipulögð í samræmi við meginregluna um hreyfingu frá nethnútum sem eru fjarlægir kjarna til nærri, svo og frá framleiðslulínum sem hafa minni áhrif á verkið til þeirra sem hafa bein áhrif á þessa vinnu.
Til dæmis, ef þú tekur nethnút í söludeild, þá mun samskiptabilun vegna vinnu í þessari deild ekki hafa áhrif á framleiðslu á nokkurn hátt. Jafnframt mun slíkt atvik hjálpa okkur, sem verktaka, að sannreyna réttmæti valinnar aðferðar við að vinna á slíkum hnútum og, eftir að hafa leiðrétt aðgerðir, vinna á næstu stigum verkefnisins.
Það er nauðsynlegt ekki aðeins að skipta um hnúta og vír í netkerfinu, heldur einnig að stilla alla íhluti rétt fyrir rétta notkun lausnarinnar í heild. Það voru stillingarnar sem voru athugaðar á þennan hátt: að hefja vinnu fjarri kjarnanum, við gáfum okkur „réttinn til að gera mistök“, án þess að útsetja mikilvæg svæði fyrir rekstur fyrirtækisins fyrir áhættu.
Við höfum bent á svæði sem hafa ekki áhrif á framleiðsluferlið, svo og mikilvæg svæði - verkstæði, hleðslu- og affermingareiningar, vöruhús osfrv. Á lykilsvæðum sömdum við viðskiptavininn um leyfilegan niðurtíma fyrir hvern nethnút fyrir sig: frá 1 til 15 mínútur. Það var ómögulegt að komast algjörlega hjá því að aftengja einstaka nethnúta, þar sem skipta þarf um kapalinn úr gamla búnaðinum yfir í þann nýja, og í því ferli að skipta er einnig nauðsynlegt að afhjúpa „skegg“ víra sem hafa myndast í nokkrum ára rekstur án viðeigandi umönnunar (ein af afleiðingum þess að útvista vinnu við lagningu kapallína).
Verkinu var skipt í nokkur þrep.
Stig 1 - Endurskoðun. Undirbúningur og samhæfing nálgunar við skipulagningu vinnu og mat á viðbúnaði teymanna: viðskiptavinar, verktaka sem annast uppsetningu og teymi okkar.
Stig 2 – Þróun sniðs til að framkvæma verk, með djúpri nákvæmri greiningu og áætlanagerð. Við völdum gátlistasnið með nákvæmri vísbendingu um röð og röð aðgerða, allt að röðinni að skipta um plástrasnúrur eftir höfnum.
Stig 3 – Vinna í skápum sem hafa ekki áhrif á framleiðslu. Áætlun og leiðrétting á stöðvunartíma fyrir síðari stig vinnu.
Stig 4 – Vinna í skápum sem hafa bein áhrif á framleiðslu. Áætlun og leiðrétting á stöðvunartíma fyrir lokastig vinnu.
Stig 5 – Framkvæma vinnu í netþjónaherberginu til að skipta um þann búnað sem eftir er. Keyrir á leið á nýjum kjarna.
Stig 6 – Röð skipting á kerfiskjarna úr gömlum netstillingum yfir í nýjar til að skipta sléttri umskipti á öllu kerfisfléttunni (VLAN, leið osfrv.). Á þessu stigi tengdum við alla notendur og fluttum alla þjónustu yfir á nýjan vélbúnað, athuguðum rétta tengingu, gættum að því að engin fyrirtækjaþjónustu stöðvaðist, tryggðum að ef einhver vandamál kæmu upp yrðu þau tengd beint við kjarnann, sem gerði það auðveldara að koma í veg fyrir hugsanlega bilanaleit og lokauppsetningu.
Hárgreiðsla úr vírskeggi
Verkefnið reyndist erfitt einnig vegna erfiðra upphafsaðstæðna.
Í fyrsta lagi er þetta gríðarlegur fjöldi hnúta og hluta netsins, með flókna staðfræði og flokkun víra í samræmi við tilgang þeirra. Slíkt „skegg“ þurfti að taka út úr skápunum og „kemba“ vandlega og finna út hvaða vír þaðan og hvert hann leiðir.
Þetta leit svona út:
svona:
eða svona:
Í öðru lagi var nauðsynlegt fyrir hvert slíkt verkefni að útbúa skrá með lýsingu á ferlinu. "Við tökum vír X frá tengi 1 í gamla búnaðinum, við stingum honum í tengi 18 á nýja búnaðinum." Það hljómar einfalt, en þegar þú ert með 48 algjörlega stífluð tengi í upphaflegu gögnunum, og það er enginn aðgerðalaus valkostur (við munum um 24x7x365), er eina leiðin út að vinna í kubbum. Því fleiri víra sem þú getur dregið út úr gömlum búnaði í einu, því hraðar er hægt að bursta þá upp og tengja þá við nýjan netbúnað, og forðast netbilanir og niður í miðbæ.
Þess vegna, á undirbúningsstigi, skiptum við netinu í blokkir - hver þeirra tilheyrði tilteknu VLAN. Hvert tengi (eða undirmengi þeirra) á gamla búnaðinum er eitt af VLAN-netunum í nýju netkerfi. Við flokkuðum þau sem hér segir: Fyrstu tengin á rofanum hýstu notendanet, í miðjunni - framleiðslunet og í þeim síðustu - aðgangsstaði og upptengi.
Þessi nálgun gerði það að verkum að hægt var að draga út og greiða úr gamla búnaðinum ekki 1 vír, heldur 10-15 í einu. Þetta flýtti fyrir verkflæðinu nokkrum sinnum.
Við the vegur, svona líta vírarnir í skápunum út eftir að hafa greitt:
eða til dæmis svona:
Eftir að 2. áfanga lauk tókum við hlé til að greina villur og gangverk verkefnisins. Til dæmis komu minniháttar gallar strax í ljós vegna ónákvæmni í netskýringum sem okkur voru veittar (rangt tengi á skýringarmyndinni er röng keypt plástrasnúra og þörf á að skipta um hana).
Hlé var nauðsynlegt, því þegar unnið var með netþjónaréttindi var jafnvel lítil bilun í ferlinu óviðunandi. Ef markmiðið var að tryggja að niðurtími á nethlutanum væri ekki lengri en 5 mínútur, þá væri ekki hægt að fara yfir það. Samþykkja þurfti við viðskiptavininn um hugsanleg frávik frá áætlun.
Hins vegar gerði fyrirfram skipulagning og lokun verksins kleift að mæta fyrirhuguðum niðurtíma á öllum stöðum og í flestum tilfellum að vera án hans.
Áskorun tímans - verkefni undir COVID
Það var þó ekki án frekari erfiðleika. Auðvitað var kransæðavírus ein af hindrunum.
Vinnan flæktist af því að faraldur hófst og ómögulegt var að vera viðstaddur vinnuna á vettvangi viðskiptavinarins fyrir alla þá sérfræðinga sem komu að ferlinu. Aðeins uppsetningarforritinu var hleypt inn á síðuna og stjórn var í gegnum Zoom herbergi sem innihélt netverkfræðing frá Linxdatacenter hlið, ég sem verkefnastjóri, netverkfræðingur frá hlið viðskiptavinar sem sá um verkið og teymið sem sá um verkið. uppsetningarvinnu.
Við verkið komu upp óupplýst vandamál og þurfti að gera breytingar á flugi. Þannig að það var fljótt hægt að koma í veg fyrir áhrif mannlegs þáttar (villur í kerfinu, villur við að ákvarða stöðu viðmótsvirkni osfrv.).
Þrátt fyrir að fjarvinnuformið virtist óvenjulegt í upphafi verkefnisins, þá aðlaguðumst við okkur fljótt nýjum aðstæðum og fórum á lokastig vinnunnar.
Við höfum keyrt tímabundna netstillingarstillingar til að keyra tvo netkjarna, gamla og nýja, samhliða til að ná sléttum umskiptum. Hins vegar kom í ljós að ein aukalína var ekki fjarlægð úr stillingarskrá nýja kjarnans og umskiptin urðu ekki. Þetta neyddi okkur til að eyða tíma í að leita að vandamálinu.
Í ljós kom að aðalumferðin var send á réttan hátt og stjórnumferðin náði ekki hnútnum í gegnum nýja kjarnann. Vegna skýrrar þrepaskiptingar var hægt að finna fljótt þann nethluta þar sem erfiðleikarnir komu upp, greina vandamálið og útrýma því.
Og þar af leiðandi
Tæknilegar niðurstöður verkefnisins
Í fyrsta lagi var nýr kjarni nýja fyrirtækjanetsins búinn til, sem við smíðuðum líkamlega/rökræna hringi fyrir. Þetta er gert á þann hátt að hver rofi í netinu hefur „second öxl“. Í gamla netinu voru margir rofar tengdir kjarnanum eftir einni leið, annarri öxl (uplink). Ef það rifnaði varð rofinn algjörlega óaðgengilegur. Og ef nokkrir rofar voru tengdir í gegnum einn upptengil, þá óvirki slysið alla deildina eða framleiðslulínuna hjá fyrirtækinu.
Í nýja netinu mun jafnvel nokkuð alvarlegt netatvik undir engum kringumstæðum geta „sett niður“ allt netið eða mikilvægan hluta þess.
Búið er að uppfæra 90% alls netbúnaðar, miðlunarbreytar (breytir merkjaútbreiðslumiðilsins) hafa verið teknir úr notkun og þörfin fyrir sérstakar raflínur til að knýja búnað með tengingu við PoE rofa, þar sem rafmagn er veitt um Ethernet vír, hefur verið útrýmt.
Einnig eru allar sjóntengingar í miðlaraherbergi og í vallarskápum merktar - á öllum lykilsamskiptahnútum. Þetta gerði það mögulegt að útbúa staðfræðilega skýringarmynd af búnaði og tengingum í netinu, sem endurspeglar raunverulegt ástand þess í dag.
Netmynd
Mikilvægasta niðurstaðan í tæknilegu tilliti: frekar umfangsmikil innviðavinna var unnin fljótt, án þess að skapa nein afskipti af starfi fyrirtækisins og nánast ómerkjanlega fyrir starfsfólk þess.
Viðskiptaniðurstöður verkefnisins
Að mínu mati er þetta verkefni áhugavert fyrst og fremst ekki frá tæknilegu hliðinni, heldur skipulagslegu hliðinni. Erfiðleikarnir voru fyrst og fremst í því að skipuleggja og hugsa í gegnum skrefin til að útfæra verkefni verkefnisins.
Árangur verkefnisins gerir okkur kleift að segja að frumkvæði okkar að þróa netstefnu innan Linxdatacenter þjónustusafnsins sé rétti kosturinn fyrir þróunarvektor fyrirtækisins. Ábyrg nálgun á verkefnastjórnun, hæf stefna og skýr áætlanagerð gerði okkur kleift að framkvæma verkið á réttu stigi.
Staðfesting á gæðum vinnunnar - beiðni frá viðskiptavininum um að halda áfram að veita þjónustu fyrir nútímavæðingu netsins á öðrum stöðum sínum í Rússlandi.
Heimild: www.habr.com