Šta su DevOps?

Trenutno je to gotovo najskuplja pozicija na tržištu. H buka oko "DevOps" inženjera nadmašuje sve zamislive granice, a situacija je još gora sa Senior DevOps inženjerima.
Radim kao vođa odeljenja za integraciju i automatizaciju, pogodite englesku skraćenicu — DevOps Manager. Da li engleska skraćenica zaista odražava naše svakodnevne aktivnosti — teško, dok ruska verzija u ovom slučaju može biti tačnija. S obzirom na prirodu mog posla, prirodno je da moram intervjuisati buduće članove svog tima, i tokom prošle godine prošlo je kroz mene oko 50 ljudi, a još toliko je odbijeno tokom predselekcije sa mojim zaposlenima.

Još uvek tražimo kolege, jer iza oznake DevOps krije se veoma velika raznolikost inženjera.

Sve što je napisano u nastavku je moje lično mišljenje, niste dužni da se slažete s njim, ali smatram da će to doneti nijansu u vašem stavu prema ovoj temi. Unatoč riziku od neugodnosti, objavljujem svoje mišljenje, jer smatram da ima mesta.

Kompanije različito razumeju ko su DevOps inženjeri i zato, kako bi brzo zaposlili resurse, stavljaju ovu oznaku svima. Situacija je prilično čudna, jer su spremne da plate neverovatne nagrade tim ljudima, dobijajući u većini slučajeva samo administratore alata.

Dakle, ko su zapravo DevOps inženjeri?

Hajde da počnemo s istorijom nastanka — Development Operations je nastao kao još jedan korak ka optimizaciji saradnje u malim timovima radi povećanja brzine proizvodnje proizvoda, kao očekivana posledica. Ideja je bila da se ojača razvojni tim znanjima o procedurama i pristupima u upravljanju proizvodnom okruženjem. Drugim rečima, programer treba da razume i zna kako njegov proizvod funkcioniše u različitim uslovima, kako da postavi svoj proizvod, koje karakteristike okruženja treba optimizovati da bi se povećala produktivnost. Tako su se tokom određenog vremena pojavili programeri sa DevOps pristupom. DevOps programeri su pisali skripte za izgradnju i pakovanje radi pojednostavljenja svoje aktivnosti i radnog okruženja. Međutim, složenost arhitekture rešenja i međusobni uticaj komponenti infrastrukture tokom vremena počeli su da pogoršavaju radne performanse okruženja, a sa svakom iteracijom bila su potrebna sve dublja razumevanja raznih komponenti, smanjujući produktivnost samog programera zbog dodatnih troškova potrebnih za razumevanje komponenti i optimizaciju sistema za određeni zadatak. Trošak programera je rastao, cena proizvoda zajedno s njim, a zahtevi za novim programerima u timu su drastično porasli, jer je bilo neophodno da pokriju obaveze „zvezde“ razvoja, a „zvezde“ su postajale sve manje dostupne. Takođe, treba napomenuti da, prema mom iskustvu, malo ko od programera je zainteresovan za specifičnosti obrade paketa od strane jezgra operativnog sistema, pravila rutiranja paketa, aspekte bezbednosti hosta. Logičan korak je bio angažovanje administratora, koji je upoznat sa tim, i poveravanje ovakvih obaveza njemu, što, zahvaljujući njegovom iskustvu, omogućava postizanje istih rezultata po nižim troškovima u poređenju sa troškovima „zvezde“ razvoja. Takvi administratori su stavljeni u tim i njihova osnovna zadaća je bila upravljanje testnim i produkcijskim okruženjima, prema pravilima konkretno odabranog tima, sa resursima dodeljenim tom timu. Tako su, ustvari, DevOps-ovi u očima većine i nastali.

Djelimično ili potpuno, tokom vremena, ovi sistemski administratori su počeli da shvataju potrebe ovog specifičnog tima za razvojem, kako olakšati život programerima i testere, kako isporučiti ažuriranje i ne ostati da spava u petak u kancelariji, ispravivši greške prilikom deploy-a. Vreme je prolazilo, a sada su "zvezde" postajali sistemski administratori koji su razumeli šta programeri žele. Sa ciljem da se minimizira uticaj, počeli su da se koriste alati za upravljanje, svi su se setili starih i pouzdanih metoda izolacije na nivou OS-a, koje su omogućavale smanjenje zahteva za bezbednošću, upravljanje mrežnim delom, kao i celokupnom konfiguracijom hosta i, kao posledica, smanjenje zahteva prema novim "zvezdama".

Pojavila se "divna" stvar — docker. Zašto divna? Samo zato što je kreiranje izolacije u chroot ili jail, kao i OpenVZ, zahtevalo značajno znanje OS-a, dok jednostavna alatka omogućava lako kreiranje izolovanog okruženja aplikacije na nekom hostu sa svim neophodnim unutar njega i vraćanje kontrole razvoju, a sistemskom administratoru samo upravljanje jednim hostom, obezbeđujući njegovu sigurnost i visoku dostupnost — logično pojednostavljenje. Ali napredak ne staje i sistemi ponovo postaju sve složeniji, delova je sve više, jedan host više ne zadovoljava potrebe sistema i potrebno je graditi klastere, ponovo se vraćamo do sistemskih administratora koji su sposobni da izgrade te sisteme.

Ciklus za ciklusom, pojavljuju se razni sistemi koji pojednostavljuju razvoj i/ili administraciju, pojavljuju se sistemi orkestracije, koji su, sve dok ne zatreba odstupiti od standardnog procesa, jednostavni za korišćenje. Mikroservisna arhitektura takođe se pojavila kako bi pojednostavila sve opisano iznad — manje međuzavisnosti, lakša za upravljanje. U svom iskustvu nisam video potpuno mikroservisnu arhitekturu, rekao bih da je 50 na 50 — 50 procenata mikroservisa, crne kutije, nešto je ušlo, izašlo obrađeno, drugih 50 — razderani monolit, servisi nesposobni da rade odvojeno od drugih komponenti. Sve to ponovo je nametnulo ograničenja na nivo znanja kako programera, tako i administratora.

Slične "ljuljačke" na nivou ekspertskog znanja određenih resursa i dalje traju. No, malo smo skrenuli s teme, postoje brojne tačke koje je potrebno osvetliti.

Build Engineer/Release Engineer

Veoma usko specijalizovani inženjeri, koji su se pojavili kao sredstvo standardizacije procesa izrade softvera i njegovih izdanja. U procesu uvođenja masovnog Agile-a činilo se da su prestali biti traženi, ali to nije slučaj. Ova specijalizacija se pojavila kao sredstvo standardizacije upravo izrade i isporuke softvera u industrijskim razmerama, tj. koristeći standardne tehnike za sve proizvode kompanije. Sa pojavom DevOps-a, programeri su delimično izgubili funkcije, jer su upravo programeri postali ti koji pripremaju proizvod za isporuku, a uzimajući u obzir promenljivu infrastrukturu i pristup u što bržoj isporuci bez obaziranja na kvalitet, vremenom su se pretvorili upravo u kočnicu promena, jer poštovanje standarda kvaliteta neizbežno usporava isporuke. Tako je postepeno deo funkcionalnosti Build/Release inženjera prešao na teret sistemskih administratora.

Ops-ovi su tako različiti

Idemo dalje i ponovo, prisutnost širokog spektra obaveza i nedostatak kvalifikovanih kadrova tera nas na strogu specijalizaciju, kao pečurke nakon kiše, pojavljuju se različiti Operations:

  • TechOps — sistemski administratori tehničke podrške aka HelpDesk Engineer
  • LiveOps — sistemski administratori, pretežno odgovorni za produkcijske okruženja
  • CloudOps — sistemski administratori specijalizovani za javne "oblake" Azure, AWS, GCP, itd.
  • PlatOps/InfraOps/SysOps — sistemski administratori infrastrukture.
  • NetOps — mrežni administratori
  • SecOps — sistemski administratori specijalizovani za informacionu bezbednost — PCI compliance, CIS compliance, patching, itd.

DevOps — (teorijski) osoba koja razumije sve procese ciklusa razvoja — razvoj, testiranje, razumije arhitekturu proizvoda, sposobna je procijeniti rizike sigurnosti, upoznata je s pristupima i alatima automatizacije, barem na visokom nivou, uz to također razumije i podršku proizvoda prije i nakon objavljivanja. Osoba koja može djelovati kao advokat i za Operacije i za Razvoj, što omogućava izgradnju povoljne suradnje između ova dva stuba. Razumije procese planiranja rada timova i upravljanja očekivanjima klijenata.

Da bi se obavljale ovakve vrste poslova i odgovornosti, ta osoba treba imati sredstva za upravljanje ne samo procesima razvoja, testiranja, već i upravljanjem infrastrukturom proizvoda, kao i planiranjem resursa. DevOps u ovom smislu ne može biti ni u IT-u, ni u R&D-u, ni čak u PMO-u; mora imati utjecaj u svim tim područjima — tehnički direktor kompanije, Chief Technical Officer.

Da li je to slučaj u vašoj kompaniji? — Sumnjam. U većini slučajeva to su ili IT ili R&D.

Nedostatak sredstava i mogućnosti utjecaja barem na jedno od ta tri područja aktivnosti proizvest će pomak problema prema onome gdje je lakše primijeniti promjene, kao što su tehnička ograničenja na objavljivanje zbog 'prljavog' koda prema podacima iz sistema za statičku analizu. To jest, kada PMO postavi strogi rok za objavljivanje funkcionalnosti, R&D ne može isporučiti kvalitetan rezultat u tim rokovima i daje ga koliko može, ostavljajući refaktoring za kasnije, DevOps koji se odnosi na IT, tehničkim sredstvima blokira objavljivanje. Nedostatak ovlašćenja za promjenu situacije, kada su odgovorni zaposlenici u pitanju, vodi do hiperodgovornosti za ono na što ne mogu utjecati, pogotovo ako ti zaposlenici razumiju i vide greške, i kako ih ispraviti — 'Sreća u neznanju', što kao posljedicu dovodi do izgaranja i gubitka tih zaposlenika.

Tržište DevOps resursa

Pogledajmo nekoliko oglasa za posao na poziciji DevOps iz raznih kompanija.

Spremni smo se sastati s Vama ako:

  1. Imate znanje o Zabbix-u i znate što je Prometheus;
  2. Iptables;
  3. Aspiran BASH;
  4. Profesor Ansible;
  5. Guru Linux;
  6. Možete koristiti debug i zajedno s programerima pronalaziti probleme aplikacija (php/java/python);
  7. Routing vas ne dovodi do histerije;
  8. Posvećujete značajnu pažnju sigurnosti sistema;
  9. Radite backup 'svega i svačega', a takođe uspešno obnavljate to 'sve i svašta';
  10. Znate da postavite sistem tako da iz maksimuma izvučete minimum;
  11. Podešavate replikacije pred spavanje na Postgres i MySQL;
  12. Podešavanje i korekcija CI/CD su vam neophodni kao doručak/ručak/večera.
  13. Imate iskustva s AWS;
  14. Spremni ste da se razvijate zajedno s kompanijom;

Dakle:

  • od 1 do 6 — sistemski administrator
  • 7 — pomalo mrežnog administriranja, što takođe dolazi pod sistemske administratore, nivoa Middle
  • 8 — malo sigurnosti, što je obavezno za sistemskog administratora nivoa Middle
  • 9-11 — Middle System Administrator
  • 12 — U zavisnosti od postavljenih zadataka ili Middle System Administrator, ili Build Engineer
  • 13 — Virtualizacija — Middle System Administrator, ili tako zvani CloudOps, proširena znanja o specificnim servisima hosting platforme, za efikasno korišćenje novčanih sredstava i smanjenje opterećenja na održavanje

Zaključujući o ovoj poziciji, može se reći da su momcima dovoljni Middle/Senior System Administrator.

Usput, ne bi trebalo previše deliti administratore na Linux/Windows. Razumem da se servisi i sistemi iz ova dva sveta razlikuju, ali osnova svima je ista i svaki administrator koji poštuje sebe poznaje i jedno i drugo, i čak i ako nije upoznat, ne bi mu bilo teško da se upozna.

Razmatramo drugu poziciju:

  1. Iskustvo u izgradnji visoko opterećenih sistema;
  2. Odlična znanja o OS Linux, opštem sistemskom softveru i web stacku (Nginx, PHP/Python, HAProxy, MySQL/PostgreSQL, Memcached, Redis, RabbitMQ, ELK);
  3. Iskustvo rada sa sistemima virtualizacije (KVM, VMWare, LXC/Docker);
  4. Poznavanje skriptnih jezika;
  5. Razumevanje principa rada mreža i mrežnih protokola;
  6. Razumevanje principa izgradnje sistema otpornosti na greške;
  7. Samostalnost i inicijativa;

Razrađujemo:

  • 1 — Senior System Administrator
  • 2 — U zavisnosti od smisla koji se ulaže u ovaj stek — Middle/Senior System Administrator
  • 3 — Iskustvo rada takođe može značiti — 'Klaster nisam podizao, ali sam stvarao i upravljao virtuelnim mašinama, imao jedan Docker host, pristup kontejnerima sam pravio' — Middle System Administrator
  • 4 — Junior System Administrator — da, administrator koji ne zna pisati osnovne skripte za automatizaciju, bez obzira na jezik, nije administrator — knjiga.
  • 5 — Middle System Administrator
  • 6 — Senior System Administrator

Rezimirajući — Middle/Senior System Administrator

Još jedna:

  1. Iskustvo rada u devops;
  2. Iskustvo u korištenju jednog ili više proizvoda za formiranje CI/CD procesa. Gitlab CI će biti prednost;
  3. Rad s kontejnerima i virtualizacijom; Ako ste koristili docker – odlično, a ako i k8s – sjajno!
  4. Iskustvo rada u agile timu;
  5. Poznavanje bilo kojeg programskog jezika;

Pogledajmo:

  • 1 — Hmm… Šta dečki podrazumijevaju? =) Vjerovatno ni sami ne znaju šta se tu krije
  • 2 — Build Engineer
  • 3 — Middle System Administrator
  • 4 — Soft skills, za sada nećemo razmatrati, iako je Agile još jedna stvar koja se interpretira kako je zgodno.
  • 5 — Previše nejasno — to može biti skriptni jezik ili kompajlirani. Interesantno, da li bi ih zadovoljavalo da sam u školi pisao na Pascalu i Basicu? =)

Također bih želio ostaviti napomenu u vezi s tačkom 3, kako bih potvrdio zašto se ova tačka pokriva administratore sistema. Kubernetes je samo orkestracija, alat koji obavija direktne komande mrežnim drajverima i hostovima za virtualizaciju/izolaciju u par komandi i omogućava apstraktno komuniciranje s njima, to je to. Na primjer, uzmimo 'build framework' Make, koji ne smatram frameworkom. Da, znam za modu da se Make ubaci gdje god treba i ne treba — obaviti Maven u Make, na primjer, ozbiljno?
U suštini, Make je samo obavijač oko shell-a, koji pojednostavljuje tačno komande kompajliranja, linkovanja, okruženja za kompajliranje, baš kao i k8s.

Jednom sam razgovarao s tipom koji je koristio k8s u svom radu preko OpenStack-a, i pričao je kako je raspoređivao servise na njemu, međutim, kada sam ga pitao konkretno o OpenStack-u, ispostavilo se da ga administriraju, kao i podižu sistemski administratori. Da li zaista mislite da osoba koja je podignula OpenStack, bez obzira na to koju platformu koristi iza njega, nije sposobna koristiti k8s? =)
Ovaj kandidat u stvari nije DevOps, već isti onaj Sistem Administrator i, da budem precizniji, Kubernetes Administrator.

Ponovo rezimiramo — Middle/Senior System Administrator bi im bio dovoljan.

Koliko vješati u gramima

Raspon predloženih plata za navedene pozicije — 90k-200k
Sada bih volio napraviti paralelu između novčanih nagrada Sistemskih Administratora i DevOps Inženjera.

U suštini, radi pojednostavljenja, moguće je razvrstati stepene prema radnom iskustvu, iako to neće biti tačno, za svrhe članka će biti dovoljno.

Iskustvo:

  1. do 3 godine — Junior
  2. do 6 godina — Middle
  3. više od 6 godina — Senior

Sa stranice za zapošljavanje se nudi:
Sistemski Administratori:

  1. Junior — 2 godine — 50k rub.
  2. Middle — 5 godina — 70k rub.
  3. Senior — 11 godina — 100k rub.

DevOps Inženjeri:

  1. Junior — 2 godine — 100k rub.
  2. Middle — 3 godine — 160k rub.
  3. Senior — 6 godina — 220k rub.

Za period 'DevOps' korišćen je period koji se bar na neki način dotiče SDLC-a.

Iz gore navedenog sledi da kompanijama zapravo nisu potrebni DevOps, a takođe da su mogli uštedeti najmanje 50 procenata od prvobitno planiranih troškova zapošljavanjem baš Administratora, a povrh toga, mogli bi jasnije definisati dužnosti traženog lica i brže zadovoljiti potrebu. Takođe, ne treba zaboraviti da jasno razdvajanje odgovornosti smanjuje zahteve prema osoblju i stvara povoljniju atmosferu u timu, s obzirom na izostanak preklapanja. U pretežnom broju oglasa za posao ima mnogo alata i DevOps oznaka, međutim bez stvarnih zahteva za DevOps Inženjera, samo tražnje za alatnim administratorom.

Proces obuke DevOps inženjera takođe je ograničen samo na skup specifičnih zadataka, alata, ne pruža opšte razumevanje procesa i njihovih zavisnosti. To je svakako dobro kada osoba može koristiti Terraform za postavljanje AWS EKS-a, u kombinaciji sa Fluentd sidecar-om u ovom klasteru i AWS ELK staklom za sistem logovanja za 10 minuta, koristeći samo jednu komandu u konzoli, ali ako ne razume sam princip obrade logova i za šta su oni potrebni, ne zna kako prikupiti metrike od njih i pratiti degradaciju usluga, onda će to biti isti onaj ko zna koristiti određene alate.

Potražnja, međutim, stvara ponudu, i vidimo izuzetno pregrejan tržište pozicija DevOps, gde zahtevi ne odgovaraju stvarnoj ulozi, a samo omogućuju sistemskim administratorima da zarađuju više.

Dakle, ko su oni? DevOps ili pohlepni sistemski administratori? =)

Kako dalje živeti?

Poslodavcima — preciznije odrediti zahtjeve i tražiti upravo one koji su potrebni, a ne rasipati se etiketama. Ako ne znate čime se bave DevOps stručnjaci — oni vam u tom slučaju nisu potrebni.

Radnicima — Učiti. Kontinuirano usavršavati svoja znanja, sagledati širu sliku procesa i pratiti put do postavljenih ciljeva. Možete postati što god poželite, samo je potrebno da se potrudite.

Izvor: habr.com

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster