Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Prišiel tretí a posledný deň prvého, no nie posledného DevOps Slurm.

Nečakali sme, že budeme môcť replikovať Slurm DevOps. Ale pre nás neočakávane, všetci rečníci súhlasili, že prídu na Slurm vo februári, a spätná väzba nám presne ukázala, ako dokončiť program. Existuje pochopenie, ako urobiť intenzívny program holistickejším a podrobnejším a niektoré témy sú praktickejšie. Takže vo februári usporiadame DevOps Slurm v Moskve. Podrobnosti budú k dispozícii koncom decembra. Oznámenie sa na Habré určite objaví.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

6. septembra, tretí deň Slurmu, vystúpili štyria rečníci.

Vladimir Guryanov, inžinier/vedúci tímu v Southbridge, ktorého prejav na druhý deň Slurm DevOps sa účastníkom intenzívneho stretnutia veľmi páčil. Vladimir je vo svojej práci aktívnym zástancom prístupu DevOps a snaží sa ho implementovať všade.

Pavel Selivanov, uznávaná hviezda Slurmu, inšpirátor prvého Kubernetes Slurmu. Študenti o ňom napísali, že „by bolo skvelé, keby viedol celý program“. Pavel je certifikovaný správca Kubernetes. Má bohaté praktické skúsenosti s implementáciou Kubernetes – viac ako 25 projektov v tíme aj individuálne.

Eduard Medvedev, CTO v Tungsten Labs, vyvinul a implementoval ChatOps v automatizácii dátových centier. Po jeho prejave na Slurme mnohí účastníci uvažovali o implementácii ChatOps vo svojich spoločnostiach. Teraz úspešne pôsobí ako bezpečnostný konzultant.

Ivan Kruglov, hlavný vývojár na Booking.com, je skutočnou hosťujúcou hviezdou konferencie. Práve pre jeho prejav sa niektorí účastníci prihlásili do Slurm DevOps. V Booking.com pracoval na projektoch infraštruktúry, ako je distribuované doručovanie a spracovanie správ, BigData a web-stack, vyhľadávanie. Teraz na jeho zozname úloh je budovanie interného cloudu a Service Mesh.

S Eduardom Medvedevom a Ivanom Kruglovom sme spravili rozsiahle rozhovory – keď budú pripravené, zverejníme ich na Habré.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Na publiku sa svojím namysleným zjavom prejavila mierna únava. Predchádzajúce dva intenzívne dni ma prinútili pracovať na doraz, hlava si vyžadovala oddych a dni voľna. Ale témy a rečníci tretieho dňa rozptýlili únavu a ospalosť. Najmä Site Reliability Engineering a Ivan Kruglov.

Smerom k dokončeniu druhý deň slumu bolo rozhodnuté odložiť monitorovanie infraštruktúry z Prometheus na zajtra. Intenzívna sa ukázala byť príliš intenzívna – nie všetci účastníci dokázali udržať tempo.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

A preto sa tretí deň začal prejavom Vladimíra Guryanova. Stručne vysvetlil, prečo je monitorovanie vlastne potrebné. Popísané a klasifikované typy monitorovania. Dotkol som sa problematiky notifikácií v monitoringu.

Témy „Ako vybudovať zdravý monitorovací systém“ a „Človekom čitateľné notifikácie“ zarezonovali u divákov veľmi rýchlo. Vladimír zakončil svoju prezentáciu témou Health Check, na čo by ste si mali dať pozor a ako nastaviť automatizáciu na základe údajov z monitorovania.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

S cieľom rozhýbať ospalých účastníkov a aktivovať ich schopnosti učenia na maximum, po Vladimirovi Guryanovovi zaujal verejnosť Pavel Selivanov témou „Prihlásenie aplikácie pomocou ELK“. Ukázal účastníkom Slurm naše najlepšie postupy pri protokolovaní a skontroloval zásobník ELK.

Po prvej prestávke na kávu, plnej komunikácie a koláčikov, sa účastníci slumu posadili do publika.

Výkony Guryanova, Selivanova a purínového alkaloidu kofeínu urobili svoju zákernú prácu. Kofeín sa dostal k adenozínovým receptorom v mozgu a nahradil tam purínový nukleozid adenozín, ktorý je zodpovedný za inhibičné procesy – čo jednoducho pripravilo účastníkov Slurmu o možnosť „leniviť“ a „zdriemnuť si“. Nie každý pochopil, čo sa stalo. Ale všetci sa rozveselili.

Publikum tak bolo na sto percent pripravené na ďalšie učenie a aktívne vstrebávanie vedomostí. A k prejavu Eduarda Medvedeva.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Eduard hovoril na tému automatizácie infraštruktúry s ChatOps a hovoril o integrácii messengerov s potrubím.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Finále tretieho dňa Slurm a Slurm DevOps všeobecne bola prezentácia Ivana Kruglova, hlavného vývojára na Booking.com. Ivan okamžite upútal pozornosť publika, priznal, že vo svojej prezentácii mal viac ako 140 snímok, čím opatrne naznačil, že účastníci Slurmu by si nemali robiť plány ani na piatok, ani na víkend.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Ivan Kruglov sa v intenzívnom, dlhom a hlbokom prejave dotkol témy DevOps a SRE, kto sú a aký majú vzájomný vzťah. Hovoril o „strašidelných pojmoch zo sveta SRE“: SLA, SLO, Error Budget a niektorých ďalších.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Nasledovala prax a ešte väčšia prax - monitorovanie SLI a SLO, používanie Error Budget a riadenie prerušení a prevádzkovej záťaže (apigateway, service mesh, ističe). A oveľa, oveľa viac.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára
Tajná modlitba vývojára.

Keďže téma SRE je mimoriadne široká a o nuansách sa dá rozprávať minimálne niekoľko dní, rozhodlo sa, že vo februári na najbližšom DevOps Slurme budeme venovať ešte viac času SRE a jej praktickej aplikácii, ako najrelevantnejšej a žiadaná technológia.

Sabbath, [6 сент. 2019 г., 18:25:30]:
Шикарный доклад!!
Я теперь думаю, что букинг по крутизне не уступают гуглу :)

aaa, [6 сент. 2019 г., 18:27:07]:
еще осталось UIUX подтянуть

mr. Dmitry, [6 сент. 2019 г., 18:28:47]:
Ага, сколько докладов слышал от спецов букинга - все круто, все четко, все по уму. Но пользоваться из-за их гуя крайне сложно

Po prejavoch prišiel rad na množstvo otázok, offline aj v pracovnom chate Slurm:

Владимир Гурьянов, [6 сент. 2019 г., 23:24:54]:
Спрашивали про мониторинг, сколько items у нас.
Не забыл, отвечаю.
Активных: 297 432

Maksim Aleksandrov, [7 сент. 2019 г., 0:11:58]:
Спасибо . Это какое количество проверок в секунду (nvps) ?  И почему все таки prometheus ?

Владимир Гурьянов, [7 сент. 2019 г., 0:24:15]:
2.21K 
Почему prometheus? Ну, хотя бы из-за service discovery и его удобной и гибкой настройки.
У zabbix плохо все в средах, где инстансы не долго живут и часто создаются новые.
С мониторингом docker и k8s у zabbix все тоже грустно.
Но для нас, пока + у прома не столько, что бы вкладывать время и силы в переезд с zabbix.

Účastníci slumu sa podelili o svoje dojmy:

Alexander B, [6 сент. 2019 г., 21:11:03]:
Спасибо за мероприятие, были "неровности", но для первого раза весьма достойно. 
Темп в некоторых практиках напрягал, это интенсив во всех смыслах этого слова ) Чтобы уместить всё и не выкидывать во второй и третий день из докладов и практик материалы по причине нехватки времени - рассмотрите возможность четырехдневного слёрма.


Roman D, [6 сент. 2019 г., 20:49:05]:
спасибо, местами было интересно. В качестве пожелания на будущее - за пару дней до мероприятия посадите пару человек с улицы и заставьте их пройти практику по вашим инструкциям, исправите ошибки и неточности.

Никита Суворов, [6 сент. 2019 г., 20:49:30 (06.09.2019, 20:50:07)]:
Если пол пожелания, тоже есть - спикерам тренироваться перед зеркалом, слух режут эээ, уууу, ыыы между словами


Max Grechnev, [6 сент. 2019 г., 19:42:57]:
Спасибо! Курс получился отличный! Финал вообще огонь)

Smith Wesson, [6 сент. 2019 г., 19:58:11]:
Спасибо за курс! Вы лучшие!

Igor Averin, [6 сент. 2019 г., 19:58:12]:
Согласен! Было оч здорово! Спасибо организаторам!

Po konferencii sme požiadali účastníkov, aby poskytli spätnú väzbu vo formulári Dokumentov Google. Výsledky nás potešili a inšpirovali.

Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára
Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára
Slurm DevOps. 3. deň. ELK, ChatOps, SRE. A tajná modlitba vývojára

Ďakujeme všetkým, ktorí boli s nami – offline, v konferenčnej miestnosti Selectel aj online. A veľmi pekne ďakujem čitateľom Habr. "Slum vám dáva krídla!" (s)

Zdroj: hab.com

Pridať komentár