4-6. rujna u Sankt Peterburgu, u konferencijskoj dvorani Selectel, održat će se trodnevni .

Izradili smo program na osnovu ideje da su teorijske radove o DevOps-u, kao i priručnici za alate, svi u mogućnosti da pročitaju sami. Zanimljivo je jedino iskustvo i praksa: objašnjenje kako raditi i ne raditi, te priče o tome kako mi radimo.
U svakoj kompaniji, svaki administrator ili programer ima svoj nivo DevOps-a. Neki pogrešno koriste Git, dok drugi primenjuju SRE. Kurs je organizovan tako da svako može pronaći nešto relevantno što može odmah implementirati.
Počinjemo sa Git-om, zatim razmatramo razvoj aplikacije, interakciju koda i infrastrukture, gradimo CI/CD, opisujemo infrastrukturu kao kod (IaC), testiramo rešenje, postavljamo monitoring, prikupljamo i analiziramo logove, i na kraju dolazimo do SRE: pretvaramo pouzdanost u merljivu i upravljivu priču.
Git
Trenutno Git ne koristi samo onaj ko je jučer kupio svoj prvi laptop. To je trivijalni i sveprisutni alat, a ipak često primetimo njegovo pogrešno korišćenje: od forsiranog push-a u master do kopiranja datoteka iz Gita na server putem Ctrl-C, Ctrl-V.
Objašnjavamo kako se ne treba raditi, kako treba raditi, i kako to rade u Southbridge.
Prolazimo kroz praksu: osnove Gita, timski rad.
Tema br. 1: Osnove rada sa Git-om
- Osnovne komande git init, commit, add, diff, log, status, pull, push
- Git flow, grane i tagovi, strategije merge
- Rad sa više remote repo-a
Tema №2: Timски rad s Git-om
- GitHub flow
- Fork, remote, pull request
- Konflikti, izdanja, još jednom o Gitflow-u i drugim flow-ima primenjenim na timove
Materijal je organizovan tako da administratori i programeri mogu odmah implementirati sve prakse u svom radu.
Iz perspektive DevOps-a, pravilno korišćenje Gita sređuje i automatizuje procese razvoja i administracije, eliminiše niz ponavljajućih problema i povećava produktivnost.
DevOps programer
Gledamo na DevOps očima programera: pokrećemo lokalnu sredinu, razvijamo aplikaciju, postavljamo njen monitoring i logovanje, lokalno testiramo, organizujemo skladištenje varijabli/tajni i service discovery, gledamo tracing (opentracing).
Tema br. 3: Rad sa aplikacijom iz perspektive razvoja
- Podešavanje lokalne sredine: praktične preporuke
- Pisanje mikroservisa na Pythonu (uključujući testove)
- Primjena docker-compose u razvoju
Tema br. 4: Interakcija koda i infrastrukture
- Praksa rada s konfiguracijama
Na kraju, programeri će vidjeti kako kod treba slati logove, kako ga testirati, i kako će se dalje obavljati debagovanje. Administratori će razumjeti potrebe programera: koje greške u kodu se javljaju, kako organizovati testiranje za programere, kako sami testirati projekat.
U ovoj fazi rješava se glavni zadatak DevOps-a: uspostavlja se međusobno razumijevanje i suradnja između developera i operacija. Ovo je ključni korak ka prelasku od prebacivanja zadataka do odgovornog međusobnog djelovanja.
Kao rezultat, povećava se brzina i kvalitet rada.
CI/CD
Moderna automatizacija podrazumijeva CI/CD. Počinjemo s tim da ćemo pogledati ručnu automatizaciju: makefile-ove, git hook-ove, skripte. Razgovaraćemo o tome kada su ovi alati još uvijek relevantni, a kada ih ne treba koristiti.
Zatim ćemo pogledati najbolje prakse moderne CI na primjeru Gitlab-a.
Tema br. 5: CI/CD uvođenje u automatizaciju
- Uvod u automatizaciju
- Alati (bash, make, gradle)
- Korištenje git-hook-ova za automatizaciju procesa
- Fabrike za proizvodne linije i njihova primjena u IT-u
- Primjer izgradnje 'zajedničkog' pipeline-a
- Moderni alati za CI/CD: Drone CI, BitBucket Pipelines, Travis itd.
Tema br. 6: CI/CD: Rad s Gitlab-om
- Gitlab CI — opšti pregled
- Gitlab Runner, njihove vrste i primjena
- Gitlab CI, posebnosti podešavanja, najbolje prakse
- Etape Gitlab CI
- Gitlab CI varijable
- Izgradnja, testiranje, deploy
- Kontrola i ograničenja izvršenja: only, when
- Rad s artefaktima
- Šabloni unutar .gitlab-ci.yml, ponovna upotreba akcija na različitim dijelovima pipeline-a
- Include — sekcije
- Centralizovano upravljanje gitlab-ci.yml (jedan fajl i automatski push u ostale repozitorije)
Suradnja administratora i programera prelazi na novi nivo: administrator piše CI šablon, a programeri ga uređuju, uspostavljajući svoj CI neovisno od administratora.
Smanjuje se zavisnost programera od administratora, smanjuje se količina ručnog rada, nestaje problem 'jedine osobe koja zna kako raditi s makefile-om'. Objave se odvijaju pouzdano i brzo.
IaC
Na temu Infrastructure as Code na primjeru Terraform govorit će administrator oblačne usluge Selectel Aleksey Stepanenko. On će pokazati kako brzo i automatizovano postaviti i skalirati servere, kako automatski pakovati slike, i kako koristiti konfigurationske predloške za trenutno dobijanje podešenih mašina.
Osoba koja je napravila hiljade IaC rješenja govoriće o tome kako to raditi ispravno, a kako ne.
Rešenje za oblačne usluge Selectel, uz minimalne izmjene, pogoduje oblačnim providerima Google i Amazon.
Zaposlenik Southbridge Nikolaj Mesropyanc biće na primjeru Ansible objašnjava kako bez zastoja postaviti aplikaciju koja radi i provjeriti njenu funkcionalnost.
Ako ručno prilagođavate infrastrukturu (podešavate servere, postavljate biblioteke i pakete po potrebi), kada pokušate da podignete kopiju okruženja, moraćete da se sjetite i ponovo izvršite sve svoje radnje. Ova zadaća lako može trajati 3-5 dana. Rad sa infrastrukturom kao kodom garantuje da imate ažurno opisano okruženje koje možete postaviti za nekoliko minuta.
Nikolaj će govoriti o tome kako pisati plejbu i koje greške se dešavaju, zašto ponekad plejbu rade sporo ili ne onako kako se očekuje. Ovo su iskustva višegodišnjeg korišćenja IaC u Southbridge.
Tema br. 7: Infrastructure as Code
- IaC: pristup infrastrukturi kao kodu
- Oblačni provideri kao dobavljači infrastrukture
- Alati za inicijalizaciju sistema, izrada slika (packer)
- IaC na primjeru Terraform
- Skladištenje konfiguracija, kolaboracija, automatizacija primjena
- Praksa izrade Ansible plejbu
- Idempotentnost, deklarativnost
- IaC na primjeru Ansible
- Database as a Code / Otpornost PostgreSQL
Infrastruktura dobija deklarativnost i idempotentnost.
Administrator uči kako upravljati složenom infrastrukturom: brzo stvarati nova okruženja, održavati jedinstvo svih okruženja, i pratiti historiju promjena, što je kritično kada na projektu radi nekoliko timova.
Developer može učiti infrastrukturu i samostalno postaviti svoja okruženja.
Bonus ovog dijela – stvaranje i podešavanje otpornog klastera baza podataka PostgreSQL. Daćemo gotov plejbuk koji koristimo u Southbridge, postavićete klaster na učionici i moći ćete koristiti ovo rješenje u svojoj kompaniji.
Testiranje infrastrukture i monitoring
Automatizacija omogućava brzo postavljanje greške na hiljadu servera. Svaka promena zahteva testiranje. S druge strane, ručno testiranje traje toliko dugo da anulira prednosti automatizacije.
Prikazaćemo u praksi kako da pišete testove uloga. Kao rezultat, moći ćete da pišete testove za svoju kompaniju. Više ne morate da pamtite izvršene postavke, već ih opisujte u testovima i automatski proveravajte da li su sve prethodne odluke i rešenja na mestu.
Zatim ćemo naučiti kako automatski dodavati sve nove servere u monitoring. Razmotrićemo posebno monitoring infrastrukture i aplikacija. Prikazaćemo loše i dobre prakse.
Tema br. 8: Testiranje infrastrukture
- Testiranje i kontinuirana integracija sa Molecule i GitLab CI
- Primena Vagrant
Tema br. 9: Monitoring infrastrukture sa Prometheus
- Zašto je monitoring potreban
- Tipovi monitoringa
- Obaveštenja u sistemu monitoringa
- Kako izgraditi zdrav sistem monitoringa
- Čitljiva obaveštenja za sve
- Health Check: na šta obratiti pažnju
- Automatizacija na osnovu podataka iz monitoringa
Neispravno funkcionisanje monitoringa je odsustvo monitoringa. Biznisu nije važno što je glavna stranica internet prodavnice dostupna, ako forma za plaćanje daje grešku.
U postavkama monitoringa i rešavanju problema programeri i administratori učestvuju ravnopravno. Tradicionalno, zadaci monitoringa padaju na administratore. Naš kurs će pokazati programerima koju ulogu igraju u stvaranju efikasnog monitoringa. Administratori će dobiti najbolje prakse iz Southbridge-a. Kao rezultat, broj gubitaka prouzrokovanih kvarovima i usporavanjem sajta ili aplikacije brzo će opadati.
Bonus sekcije: automatizacija na osnovu monitoringa. Na primer, monitoring javlja da je došlo do opterećenja na sajtu i automatski se pokreće skaliranje web servera.
Logovanje
Greška u radu sa logovima je ta da administratori i programeri gledaju logove direktno na serverima. Ako imate više od jednog servera, to traje dugo. To nije sigurno: programer ulazi na server gde ne bi trebao.
DevOps zahteva centralizovano prikupljanje, obradu i analizu logova.
Tema br. 10: Logovanje aplikacije sa ELK
- Glavne primjene i mogućnosti elastic (pretraživanje, skladište, osobine skaliranja, fleksibilnost prilagođavanja)
- Pregled kibane (glavne funkcionalnosti, jezik upita, upravljanje nadzornim pločama, kreiranje grafikona)
- Pregled proizvoda zasnovanih na elastic i njihova primjena
- Prikupljanje metrika u APM (praćenje aplikacija)
- Dodatno: Pregled novog proizvoda — SIEM
Implementacija ovog pristupa učiniće logove jednostavnim i razumljivim alatom za analizu, podešavanje i optimizaciju aplikacije i infrastrukture.
SRE
I dolazimo do teme koja Southbridge samo proučava i zbog koje drugi govornici žele ostati do posljednjeg dana Sljerma. Drago nam je da je o tome pristao govoriti Ivan Kruglov iz Booking.com.
Projekat živi u stvarnom svetu, gde pouzdanost nikada nije apsolutna, i svaka odluka košta novac.
Šta je SLA u kontekstu složenog projekta? Recimo, kako proceniti da je sajt dostupan, ali slike se učitavaju sa zakašnjenjem. Koje su metrike SLA, gde ih mjeriti, kako ih mjeriti?
Kako postaviti SLA? Kako ih održati?
Tema br. 11: SRE
Definicija SLA, SLO, Error Budget i drugi strašni pojmovi iz sveta SRE
SRE: Praksa praćenja SLI i SLO
SRE: Praksa primjene Error Budget
SRE: Upravljanje prekidima i operativnim opterećenjem (apigateway, service mesh, circuit breakers)
Biznis želi SRE. Bare bare na najjednostavnijem nivou: uzeti rezervni server ili podići iz rezervne kopije? Jedna baza podataka ili klaster? Instalirati zaštitu od DDoS preventivno ili samo u momentu napada?
Direktorima neće biti dovoljno da čuju da "sajt radi", kada ih klijent pozove i kaže da forma za narudžbinu ne radi.
Zato DevOps inženjeru je važno barem površno razumeti SRE kako bi adekvatno razgovarao s biznisom o njegovim potrebama.
Zaključak
Tokom vremena administratori i programeri će naučiti:
— ispravno raditi sa Git-om;
— organizovati lokalni razvoj;
— konfigurisati (administratori) i koristiti (programeri) CI/CD;
— raditi sa infrastrukturom kao sa kodom;
— testirati infrastrukturu;
— pratiti infrastrukturu i aplikaciju;
— konfigurisati logovanje;
— razumeti, a u idealnom slučaju — koristiti SRE.
Za pažljive čitatelje — na promotivni kod habrapost popust od 15%.
Za sve tačke pripremamo praksu i alate. Tako da će svaki učesnik, po povratku sa Slyerma, moći da podigne svoju kompaniju na sledeći nivo DevOps-a.
Za poslovanje to znači smanjenje troškova administracije i razvoja, smanjenje vremena neaktivnosti, povećanje pouzdanosti, bržu isporuku funkcionalnosti i rešavanje grešaka.
Izvor: habr.com
