Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Wann d'Aarbecht an engem Laptop passt a kann autonom vun anere Leit gemaach ginn, da gëtt et kee Problem op eng Fernplaz ze plënneren - just moies doheem ze bleiwen. Awer net jiddereen ass sou glécklech.

Den On-Call Verréckelung ass en Team vun Service Disponibilitéit Spezialisten (SREs). Et enthält Pflicht Administrateuren, Entwéckler, Manager, souwéi e gemeinsame "Dashboard" vu 26 LCD Panelen vun 55 Zoll all. D'Stabilitéit vun de Servicer vun der Firma an d'Geschwindegkeet vun der Problemléisung hänkt vun der Aarbecht vun der Pflichtverschiebung of.

Haut Dmitry Melikov elo 10n, de Manager vun der Pflicht Schicht, wäert schwätzen iwwer wéi se an e puer Deeg et fäerdeg bruecht hunn Ausrüstung bei hir Heem ze transportéieren an nei Aarbechtsprozesser opzebauen. Ech ginn him d'Wuert.

- Wann Dir eng endlos Versuergung vun Zäit hutt, kënnt Dir bequem iwwerall mat alles plënneren. Awer déi séier Verbreedung vum Coronavirus huet eis a komplett aner Konditioune gesat. Yandex Mataarbechter waren zu deenen éischten, déi op Fernaarbecht wiesselen - och virun der Aféierung vum Selbstisolatiounsregime. Et ass esou geschitt. En Donneschdeg, den 12. Mäerz gouf ech gefrot d'Méiglechkeet ze evaluéieren, d'Aarbecht vun der Equipe heem ze plënneren. E Freideg den 13. koum eng Empfehlung fir op Fernaarbecht ze wiesselen. An der Nuecht op en Dënschdeg, de 17. Mäerz hate mir alles prett: d'Leit am Pflicht hu vun doheem aus geschafft, d'Ausrüstung gouf transportéiert, déi fehlend Software gouf geschriwwe, d'Prozesser goufen nei konfiguréiert. An elo wäert ech Iech soen wéi mir et ofgezunn hunn. Awer als éischt musst Dir un d'Aufgaben erënneren, déi d'Pflichtverschiebung léist.

Wien si mir

Yandex ass eng grouss Firma mat Honnerte vu Servicer. D'Stabilitéit vun der Sich, Stëmmassistent an all aner Produkter hänkt net nëmmen vun den Entwéckler of. D'Energieversuergung am Rechenzentrum kann gestéiert ginn. En Aarbechter kann zoufälleg en optesche Kabel beschiedegen beim Ersatz vun Asphalt. Oder et kann e Stroum an der Benotzeraktivitéit sinn, wat en dréngende Bedierfnes fir d'Kapazitéit ëmzegoen. Ausserdeem liewen mir all an enger grousser komplexer Infrastruktur, an d'Verëffentlechung vun engem Produkt kann zoufälleg zu der Degradatioun vun engem aneren féieren.

26 Panelen an eisem Open Space sinn annerhallef Dausend Alarmer a méi wéi honnert Charts a Panelen vun eise Servicer. Wesentlech ass dëst e risegt Diagnosepanel. En erfuerene Administrateur op Pflicht ka séier de Status vu wichtege Komponenten verstoen andeems se se kucken a kann d'Richtung setzen fir en technologesche Problem z'ënnersichen. Dëst bedeit net datt eng Persoun dauernd all d'Apparater kuckt: d'Automatisatioun selwer wäert opmierksam maachen andeems Dir eng Notifikatioun un d'speziell Interface vum Flichtoffizéier schéckt, awer ouni e visuelle Panel kann d'Léisung vum Problem laang daueren.

Wann Problemer entstinn, evaluéiert den Duty Offizéier fir d'éischt hir Prioritéit. Et isoléiert dann de Problem oder miniméiert säin Impakt op d'Benotzer.

Et gi verschidde Standard Weeër fir de Problem ze isoléieren. Ee vun hinnen ass d'Degradatioun vun de Servicer, wann den Administrateur op Pflicht e puer vun de Funktiounen ausschalt, déi d'Benotzer am mannsten bemierken. Dëst erlaabt Iech temporär d'Laascht ze reduzéieren an erauszefannen wat geschitt ass. Wann e Problem mam Rechenzentrum entsteet, kontaktéiert den Duty Offizéier d'Operatiounsteam, versteet de Problem, iwwerwaacht den Timing vu senger Resolutioun an, wann néideg, spezialiséiert Teams involvéiert.

Wann den Administrateur op Pflicht e Problem net isoléiere kann, deen duerch eng Verëffentlechung entstanen ass, mellt hien et un d'Serviceteam - an d'Entwéckler sichen no Feeler am neie Code. Wa se et net erausfannen, dann zitt den Administrateur Entwéckler vun anere Produkter oder Service Disponibilitéit Ingenieuren un.

Ech ka laang iwwer schwätzen wéi alles hei funktionnéiert, awer ech mengen, ech hunn d'Essenz scho vermëttelt. D'Pflichtverschiebung koordinéiert d'Aarbecht vun alle Servicer an iwwerwaacht global Problemer. Et ass wichteg fir den Administrateur am Pflicht de Diagnosepanel virun den Aen ze hunn. Dofir, wann Dir op Fernaarbecht wiesselt, kënnt Dir net just jidderengem e Laptop ginn. Charts an Alarmer passen net um Bildschierm. Wat kann een maachen?

Idea

Am Büro schaffen all zéng Administrateuren op Flicht a Schichten hannert engem Dashboard, dat enthält 26 Monitore, zwee Computeren, véier NVIDIA Quadro NVS 810 Videokaarten, zwee Rack-Mount oninterruptible Stroumversuergung a verschidde onofhängeg Netzwierkzougäng. Mir mussen dofir suergen, datt jidderee d'Méiglechkeet hätt doheem ze schaffen. Et ass einfach net méiglech esou eng Mauer an engem Appartement ze montéieren (meng Fra wäert besonnesch frou doriwwer sinn), also hu mir beschloss eng portable Versioun ze kreéieren déi doheem ka bruecht a montéiert ginn.

Mir hunn ugefaang mat der Konfiguratioun ze experimentéieren. Mir mussen all d'Apparater op manner Affichage passen, sou datt d'Haaptfuerderung fir de Monitor eng héich Pixel Dicht war. Vun den 4K Monitore verfügbar an eisem Ëmfeld, hu mir de Lenovo P27u-10 fir Testen gewielt.

Vun Laptops hu mir e 16-Zoll MacBook Pro geholl. Et huet e zimlech mächtege Grafik-Subsystem, noutwendeg fir Biller op verschiddene 4K-Displays ze maachen, a véier universal Type-C Connectoren. Dir kënnt froen: firwat net Desktop? E Laptop mat genau deen selwechten aus engem Lager ersetzen ass vill méi einfach a méi séier wéi eng identesch Systemunitéit ze montéieren an ze konfiguréieren. An et waacht manner.

Elo musse mir verstoen wéi vill Monitore mir tatsächlech mam Laptop kënne verbannen. An de Problem hei ass net d'Zuel vun de Stecker; mir konnten dat nëmmen erausfannen andeems Dir de montéierte System testen.

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Testen

Mir hunn all Charts an Alarmer ganz bequem op véier Monitore gesat an hunn se souguer mat engem Laptop verbonnen, awer mir sinn an e Problem gelaf. Rendering 4x4K Pixelen op verbonne Monitore setzen esou eng Belaaschtung op d'Videokaart datt de Laptop och beim Laden drainéiert gouf. Glécklecherweis gouf de Problem mat der Hëllef vun der Lenovo ThinkPad Thunderbolt 3 Dock Gen geléist 2. Ech konnt e Monitor, Stroumversuergung a souguer meng Lieblingsmaus an Tastatur op d'Kopplingsstatioun konnektéieren.

Awer en anere Problem ass direkt opgetrueden: d'GPU huet sou vill gekacht datt de Laptop iwwerhëtzt huet, dat heescht datt d'Batterie och iwwerhëtzt ass, wat als Resultat an de Schutzmodus gaangen ass an opgehalen huet d'Laascht ze akzeptéieren. Am Allgemengen ass dëst e ganz nëtzlechen Modus dee géint geféierlech Situatiounen schützt. A verschiddene Fäll gouf de Problem mat der Hëllef vun engem High-Tech-Apparat geléist - e Kugelstift ënner dem Laptop gesat fir d'Belëftung ze verbesseren. Awer dëst huet net jidderengem gehollef, also hu mir och d'Geschwindegkeet vum Standard Fan erhéicht.

Et war eng méi désagréabel Fonktioun. All Charts an Alarmer mussen op enger strikt definéierter Plaz sinn. Stellt Iech vir datt Dir e Fliger pilotéiert fir ze landen - an da fänken d'Geschwindegkeetsindikatoren, Héichtmeter, Variometer, Haltungsindikatoren, Kompass a Positiounsindikatoren un d'Gréisst z'änneren an op verschidde Plazen ze sprangen. Also hu mir beschloss eng Applikatioun ze maachen déi mat dësem hëlleft. An engem Owend hu mir et an Electron.js geschriwwen, e fäerdeg gemaach API iwwer d'Erstelle an d'Gestioun vu Fënsteren. Mir hunn e Konfiguratiounsprozessor an hir periodesch Aktualiséierung bäigefüügt, souwéi Ënnerstëtzung fir eng limitéiert Zuel vu Monitore. E bësse méi spéit hunn se Ënnerstëtzung fir verschidde Setups bäigefüügt.

Assemblée an Liwwerung

Bis e Méindeg haten d'Wizards vum Helpdesk 40 Monitore, zéng Laptops an déi selwecht Unzuel un Dockingstatiounen fir eis kritt. Ech weess net wéi se et gepackt hunn, awer villmools Merci.

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Et bleift just nach alles an d'Appartementer vun den Administrateuren op Flicht ze liwweren. An dëst sinn zéng Adressen a verschiddenen Deeler vu Moskau: Süden, Osten, Zentrum, an och Balashikha, déi 45 Kilometer vum Büro ass (iwwregens, e Stagiaire vu Serpukhov gouf spéider bäigefüügt). Et war néideg dat alles iergendwéi tëscht de Leit ze verdeelen, Logistik ze bauen.

Ech hunn all d'Adressen op eise Kaarten aginn, et ass nach ëmmer eng Méiglechkeet fir de Wee tëscht verschiddene Punkten ze optimiséieren (ech hunn déi gratis Beta Versioun vum Tool fir Courrieren benotzt). Mir hunn eis Team a véier onofhängeg Teams vun zwee Leit opgedeelt, jidderee mat sengem eegene Wee. Mäin Auto huet sech als déi grouss erausgestallt, also hunn ech Ausrüstung fir véier Mataarbechter gläichzäiteg geholl.

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Déi ganz Liwwerung huet e Rekord dräi Stonnen gedauert. Mir sinn um Méindeg den Owend um zéng aus dem Büro fortgaang. Um 1 Auer de Moien war ech schonn doheem. Déi selwecht Nuecht si mir mat neien Ausrüstung op d'Pflicht gaangen.

Wat am Enn

Amplaz vun enger grousser Diagnosekonsole hu mir zéng relativ portabel am Appartement vun all Persoun op Flicht zesummegesat. Natierlech waren et nach e puer Detailer ze sortéieren. Zum Beispill hu mir fréier een "Eisen" Telefon fir den Duty Offizéier fir Notifikatiounen. Dëst huet net an den neie Konditioune geschafft, sou datt mir mat "virtuellen Telefone" fir Flichtoffizéier komm sinn (am Wesentlechen, Kanäl am Messenger). Et waren och aner Ännerungen. Awer den Haapt Saach ass datt mir a Rekordzäit et fäerdeg bruecht hunn net nëmme Leit ze transferéieren, de Risiko vun hirer Infektioun ze reduzéieren, awer all eis Aarbecht heem ouni Schued fir Prozesser a Produktstabilitéit. Mir schaffen an dësem Modus fir e Mount elo.

Hei drënner fannt Dir Fotoe vun de richtegen Aarbechtsplaze vun eise Flichtebeamten.

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Wéi mir de Yandex Flichtverschiebung evakuéiert hunn

Source: will.com