Napomena prev.: U zajednici Kubernetes popularnost dobija trend poznat kao GitOps, čemu smo lično svedočili, KubeCon Europe 2019. Ovaj termin je relativno nedavno vodeća osoba kompanije Weaveworks — Alexis Richardson — i označava upotrebu poznatih alata za programere (pre svega — Git, odakle i naziv) za rešavanje problema u eksploataciji. Konkretno, radi se o eksploataciji Kubernetes-a putem čuvanja njegovih konfiguracija u Git-u i automatskom primeni izmena u klaster. O dva pristupa toj primeni govori Matthias Jg u ovom članku.

Prošle godine (zapravo, to se formalno dogodilo u avgustu 2017. — napomena prev.) pojavio se novi pristup za implementaciju aplikacija u Kubernetesu. Zove se GitOps, a temelji se na osnovnoj predstavi da se praćenje verzija deployment-a odvija u sigurnom okruženju Git repozitorijuma.
Glavne prednosti ovog pristupa su sledeće:
- Verzija deployment-a i istorija izmena. Stanje celog klastera se čuva u Git repozitorijumu, a deployment-i se ažuriraju samo putem commit-a. Pored toga, sve izmene se mogu pratiti pomoću istorije commit-a.
- Vraćanje na prethodne verzije koristeći poznate Git komande. Jednostavan
git resetomogućava vraćanje izmena u deployment-ima; uvek su dostupna prethodna stanja. - Gotova kontrola pristupa. Obično Git sistem sadrži mnogo poverljivih podataka, zbog čega većina kompanija posvećuje posebnu pažnju njenoj zaštiti. Shodno tome, ova zaštita se primenjuje i na operacije sa deployment-ima.
- Politike za deployment. Većina Git sistema od samog početka podržava politike za različite grane — na primer, samo pull request-ovi mogu ažurirati master, a izmene mora proveriti i odobriti drugi član tima. Kao i sa kontrolom pristupa, iste politike se primenjuju na ažuriranje deployment-a.
Kao što vidite, metoda GitOps ima mnoge prednosti. Tokom poslednje godine, posebno su popularizovana dva pristupa. Jedan se oslanja na push, drugi na pull. Pre nego što ih razmotrimo, hajde da prvo pogledamo kako izgledaju tipični deployment-i Kubernetes-a.
Načini implementacije
Tokom poslednjih godina u Kubernetesu su se ustalili različiti načini i alati za implementaciju:
- Na osnovu nativnih šablona Kubernetes/Kustomize. Ovo je najjednostavniji način za implementaciju aplikacija u Kubernetes. Razvijač kreira osnovne YAML datoteke i primenjuje ih. Da bi se izbeglo stalno prepisivanje istih šablona, razvijen je Kustomize (koji pretvara Kubernetes šablone u module). Napomena prev.: Kustomize je integrisan u kubectl sa .
- Helm grafikonima. Helm grafikon omogućava kreiranje setova šablona, init kontejnera, sidecarova itd., koji se koriste za implementaciju aplikacija sa fleksibilnijim mogućnostima podešavanja nego u pristupu zasnovanom na šablonima. Osnova ove metode su šablonizovane YAML datoteke. Helm ih popunjava raznim parametrima i zatim šalje Tilleru — klasterskom komponentu koja ih implementira u klasteru i omogućava ažuriranja i vraćanja. Važno je da Helm zapravo samo ubacuje potrebne vrednosti u šablone i zatim ih primenjuje kao što se to radi u tradicionalnom pristupu. (više o tome kako to funkcioniše i kako se može koristiti, pročitajte u našoj — napomena prev.). Postoji raznolikost pripremljenih Helm grafikona koji pokrivaju širok spektar zadataka.
- Alternativni alati. Ima mnogo alternativnih alata. Sve ih объединяет to što pretvaraju određene šablon datoteke u razumljive Kubernetes YAML datoteke i zatim ih primenjuju.
U svom radu stalno koristimo Helm grafikone za važne alate (s obzirom da je u njima već mnogo pripremljeno, što značajno olakšava život) i 'čiste' YAML datoteke Kubernetes za implementaciju vlastitih aplikacija.
Pull & Push
U jednom od svojih nedavnih blog postova predstavio sam alat , koji omogućava komitovanje šablona u Git repozitorij i ažuriranje implementacije nakon svake komitacije ili push-a kontejnera. Moje iskustvo pokazuje da je ovaj alat jedan od osnovnih u promociji pull pristupa, pa ću na njega često ukazivati. Ako želite da saznate više o tome kako ga koristiti, evo .
NB! Sve prednosti korišćenja GitOps ostaju za oba pristupa.
Pristup zasnovan na Pull

Osnova pristupa pull leži u činjenici da se sve promene primenjuju iznutra klastera. Unutar klastera se nalazi operator koji redovno proverava povezane Git repozitorijume i Docker Registry. Ako dođe do bilo kakvih promena, stanje klastera se ažurira iznutra. Obično se smatra da je takav proces prilično siguran, jer nijedan spoljašnji klijent nema pristup administratorskim pravima klastera.
Prednosti:
- Nijedan spoljašnji klijent nema pravo da menja klaster, sva ažuriranja se primenjuju iznutra.
- Neki alati takođe omogućavaju sinhronizaciju ažuriranja Helm-čartova i vezivanje istih za klaster.
- Docker Registry se može skenirati za nove verzije. Ako se pojavi nova slika, Git repozitorijum i deployment se ažuriraju na novu verziju.
- Pull alati mogu biti raspoređeni po različitim prostorima imena sa različitim Git repozitorijumima i pravima pristupa. Zbog toga se može primeniti model višegodišnjeg korišćenja (multitenant). Na primer, tim A može koristiti prostor imena A, tim B — prostor imena B, dok tim zadužen za infrastrukturu može koristiti globalni prostor.
- Kao pravilo, alati su prilično lagani.
- U kombinaciji sa alatima kao što je operator , tajne se mogu čuvati u enkriptovanom obliku u Git repozitorijumu i izvući unutar klastera.
- Nema veze sa CD-pipelines, jer se razmeštaji odvijaju unutar klastera.
Mane:
- Upravljati tajnama deploymenta iz Helm-čartova je teže nego sa običnim, jer ih prvo treba generisati u obliku, recimo, sealed secrets, zatim dešifrovati unutrašnjim operatorom i tek tada postaju dostupne za pull alat. Nakon toga, može se pokrenuti release u Helm-u sa vrednostima već razmeštenih tajni. Najjednostavniji način je kreirati tajnu sa svim vrednostima Helm-a koje se koriste za deployment, dešifrovati je i komitovati u Git.
- Korištenjem pull-pristupa, vezani ste za alate koji operiraju s pull-ovima. To ograničava mogućnost prilagodbe procesa implementacije u klasteru. Na primjer, rad s Kustomizeom otežava se jer se mora izvoditi prije nego što konačni predlošci stignu u Git. Ne kažem da se ne mogu koristiti zasebni alati, ali ih je teže integrirati u proces implementacije.
Pristup temeljen na Push

U push-pristupu vanjski sustav (pretežno CD-pipeline) pokreće implementacije u klaster nakon commit-a u Git repozitorij ili u slučaju uspješnog izvršavanja prethodnog CI-pipelinea. U ovom pristupu, sustav ima pristup klasteru.
Prednosti:
- Sigurnost se određuje Git repozitorijem i pipelineom za gradnju.
- Implementacija Helm chartova je jednostavnija, postoji podrška za Helm dodatke.
- Upravljanje tajnama je lakše, jer se tajne mogu primijeniti u pipelineima, kao i pohraniti u Git-u u šifriranom obliku (ovisno o preferencijama korisnika).
- Nema vezanosti za specifičan alat jer se mogu koristiti bilo koje vrste alata.
- Ažuriranja verzija kontejnera mogu biti inicirana pipelineom za gradnju.
Mane:
- Podaci za pristup klasteru se nalaze unutar sustava gradnje.
- Ažuriranje kontejnera implementacija i dalje je lakše izvesti s pull-procesom.
- Jaka ovisnost o CD-sustavu, jer potrebni pipelinei možda su prvotno napisani za Gitlab Runners, a zatim tim odluči preći na Azure DevOps ili Jenkins... i morat će se izvršiti migracija velikog broja pipelinea za gradnju.
Zaključci: Push ili Pull?
Kao što obično biva, svaki pristup ima svoje prednosti i mane. Neke zadatke je lakše realizovati na jedan način, a teže na drugi. Na početku sam vršio implementaciju ručno, ali nakon što sam naišao na nekoliko članaka o Weave Flux-u, odlučio sam implementirati GitOps procese za sve projekte. Za osnovne predloške to se pokazalo lakim, ali potom sam počeo nailaziti na poteškoće sa Helm chart-ovima. U to vreme, Weave Flux je nudio samo osnovnu verziju Helm Chart Operator-a, ali čak i sada su neki zadaci teži zbog potrebe da se ručno kreiraju tajni podaci i primene. Možete reći da je pull pristup mnogo sigurniji, jer su akreditive klastera van njegovih granica, što toliko povećava bezbednost da to opravdava dodatne napore.
Razmišljajući malo, došao sam do neočekivanog zaključka da to nije slučaj. Kada govorimo o komponentama koje zahtevaju maksimalnu zaštitu, takav spisak će uključivati skladišta tajnih informacija i CI/CD sisteme, Git repozitorijume. Informacije unutar njih su veoma ranjive i potrebne su maksimalna zaštita. Pored toga, ako neko uspe da prodre u vaš Git repozitorijum i može da push-uje kod, moći će da implementira sve što želi (bez obzira na izabrani pristup, bio to pull ili push) i da se infiltrira u sisteme klastera. Tako su najvažnije komponente koje zahtevaju zaštitu Git repozitorijum i CI/CD sistemi, a ne akreditive klastera. Ako imate dobro postavljene politike i mere bezbednosti za sisteme tog tipa, a akreditive klastera dobijate u pipeline-ima samo u vidu tajni, dodatna bezbednost pull pristupa može se pokazati ne tako dragocenom kao što se prvobitno pretpostavljalo.
Dakle, ako je pull pristup teži i ne donosi dobitak u bezbednosti, zar ne bi bilo logično koristiti samo push pristup? Ali, neko može reći da ste kod push pristupa previše vezani za CI/CD sistem i možda bi bilo bolje ne raditi tako, kako bi u budućnosti migracije bile lakše.
Prema mom mišljenju (kao i uvijek), trebate koristiti ono što najviše odgovara određenoj situaciji ili kombinirati pristupe. Osobno koristim oba: Weave Flux za deployment-e temeljene na pull-u, koje uglavnom uključuju naše vlastite usluge, i push pristup s Helm-om i plugin-ovima, koji olakšava primjenu Helm chart-ova na klasteru i omogućava jednostavno kreiranje tajni. Mislim da nikada neće biti jedinstvenog rješenja koje odgovara svim situacijama, jer uvijek postoji mnogo nijansi koje ovise o specifičnom slučaju primjene. U tom smislu, toplo preporučujem GitOps — znatno olakšava život i povećava sigurnost.
Nadam se da će moje iskustvo na ovu temu pomoći da odlučite koji je metod najbolji za vaš tip deployment-a, a volio bih čuti vaše mišljenje.
P.S. Napomena od prevodioca
U minusima pull modela postoji tačka da je teško staviti renderirane manifeste u Git, ali nema minusa da CD pipeline u pull modelu živi zasebno od rollout-a i zapravo postaje pipeline kategorije Continuous Apply. Stoga će biti potrebno još više truda da se prikupi status svih deployment-a i nekako omogući pristup logovima/statusu, pri čemu poželjno s povezivanjem na CD sistem.
U tom smislu, push model omogućava pružanje nekih garancija rollout-a, jer vrijeme trajanja pipeline-a može biti jednako vremenu trajanja rollout-a.
Isp testirali smo oba modela i došli do istih zaključaka kao autor članka:
- Pull model nam odgovara za organizaciju ažuriranja sistemskih komponenti na velikom broju klastera (vidi ).
- Push model zasnovan na GitLab CI dobro je prilagođen za rollout aplikacija pomoću Helm chart-ova. Pri tom, rollout deployment-a unutar pipeline-ova prati se pomoću alata . Usput, u kontekstu ovog našeg projekta stalno smo čuli "GitOps" kada smo raspravljali o hitnim problemima DevOps inženjera za našim štandom na KubeCon Europe'19.
P.P.S. od prevodioca
Takođe pročitajte na našem blogu:
- «»;
- «»;
- «»;
- «».
Samo registrovani korisnici mogu učestvovati u anketi. , molim vas.
Koristite li GitOps?
Da, pristup pull
Da, push
Da, pull + push
Da, nešto drugo
Ne
Glasalo je 30 korisnika. 10 korisnika se suzdržalo.
Izvor: habr.com
