Poboljšavamo Ansible

Poboljšavamo Ansible
Nije tajna da Ansible s "podrazumevanjem" postavkama može obavljati svoj posao prilično sporo. U ovom članku ću navesti nekoliko razloga za to i predložiti koristan minimum postavki koje bi, sasvim moguće, mogle značajno povećati brzinu rada vašeg projekta.

Ovdje diskutujemo o Ansible 2.9.x, koji je instaliran u sveže kreiranom virtualenv-u na vaš omiljen način.

Nakon instalacije, izradite datoteku "ansible.cfg" pored vašeg playbook-a — takvo će postavljanje omogućiti prenos tih postavki zajedno s projektom, a one će se automatski učitavati.

Cevovodjenje

O tome da treba koristiti pipelining, odnosno ne kopirati module u datotečni sistem ciljne mašine, već prenositi obavijen zip arhiv u Base64 direktno na stdin Python interpreteru, neki su možda čuli, a neki nisu, ali činjenica ostaje: ova postavka i dalje ostaje nedovoljno cenjena. Nažalost, neki popularni Linux distribucije su ranije podrazumevano loše konfigurisali sudo — tako da je ova komanda zahtevala prisustvo tty (terminala), pa je Ansible ostavio ovu veoma korisnu postavku isključenu po defaultu.

pipelining = True

Prikupljanje činjenica

Da li ste znali da Ansible s podrazumevanjem postavkama inicira prikupljanje činjenica za svaki play sa svim hostovima koji učestvuju? U suštini, ako niste znali, sada znate. Da biste to izbegli, treba da uključite ili režim eksplicitnog zahteva za prikupljanje činjenica (explicit), ili smart režim. U njemu će se činjenice prikupljati samo sa onih hostova koji nisu bili prisutni u prethodnim play-ima.
UPD. Prilikom kopiranja moraćete da izaberete neku od ovih postavki.

gathering = smart|explicit

Ponovno korišćenje ssh veza

Ako ste ikada pokretali Ansible u režimu ispravke grešaka (opcija "v", ponovljena od jedan do devet puta), možda ste primetili da se ssh veze stalno uspostavljaju i prekidaju. Tu se takođe javljaju neke finese.

Izbegavanjem faze ponovne uspostave ssh veze može se ostvariti na dva nivoa odjednom: kako direktno u ssh klijentu, tako i prilikom prenosa datoteka na upravljani host sa upravljačkog.
Za ponovnu upotrebu otvorene SSH veze dovoljno je samo prenijeti potrebne ključeve SSH klijentu. Tada će početi sljedeće: prilikom prve uspostavljanja SSH veze dodatno će kreirati takozvani kontrolni socket, a prilikom narednih — provjeravati postojanje tog socket-a i, ako je uspješno, ponovo koristiti postojeću SSH vezu. A kako bi to sve imalo smisla, postavljamo vrijeme održavanja veze kada je neaktivna. Detaljnije se može pročitati u dokumentaciji o SSH, a u kontekstu Ansible samo koristimo "provođenje" potrebnih opcija SSH klijentu.

ssh_args = "-o ControlMaster=auto -o ControlPersist=15m"

Za ponovnu upotrebu već otvorene SSH veze prilikom prijenosa datoteka na upravljani host dovoljno je navesti još jedan nepoznat parametar ssh_transfer_method. Dokumetacija o tome je izuzetno oskudna i obmanjujuća, jer je ova opcija potpuno funkcionalna! Ipak, čitanje izvornog koda omogućava razumijevanje šta će se tačno dešavati: na upravljanom hostu će biti pokrenuta komanda dd, koja direktno radi sa potrebnom datotekom.

transfer_method = piped

Usput, u grani «develop» ova postavka takođe postoji i nije nestala.

Ne boj se noža, boj se vilice

Još jedna korisna postavka su forks. Ona definiše broj radnih procesa koji će se istovremeno povezivati na hostove i izvršavati zadatke. Zbog karakteristika Pythona kao programskog jezika koriste se upravo procesi, a ne niti, jer Ansible još uvek podržava Python 2.7 — nikakvog asyncio, ovde nije potrebno sprovoditi asinhronizaciju! Po defaultu, Ansible pokreće pet radnika, ali ako se pravilno zamoli, može pokrenuti više:

forks = 20

Samo odmah upozoravam da ovde mogu postojati neki problemi povezani sa dostupnom memorijom na upravljačkoj mašini. Drugim rečima, postaviti forks=100500, naravno, može, ali ko kaže da će raditi?

Svodimo sve zajedno

Na kraju, potrebne postavke za ansible.cfg (ini-format) mogu izgledati ovako:

[defaults]
gathering = smart|explicit
forks = 20
[ssh_connection]
pipelining = True
ssh_args = -o ControlMaster=auto -o ControlPersist=15m
transfer_method = piped

A ako želiš sve da sakriješ u normalni YaML-inventory zdravog čoveka, on može izgledati otprilike ovako:

---
all:
  vars:
    ansible_ssh_pipelining: true
    ansible_ssh_transfer_method: piped
    ansible_ssh_args: -o ControlMaster=auto -o ControlPersist=15m

Nažalost, sa postavkama „gathering = smart/explicit“ i „forks = 20“ to ne prolazi: njihovi YaML ekvivalenti ne postoje. Ili ih definišemo u ansible.cfg, ili ih prosledimo kroz okruženjske varijable ANSIBLE_GATHERING i ANSIBLE_FORKS.

O Mitogenu
— A gde je ovde reč o Mitogenu? — možeš upitati, poštovani čitatelju. U ovom članku — nigde. Ali ako si zaista spreman da čitaš njegov kod i da razumeš zašto tvoj playbook ne radi s Mitogenom, dok sa običnim Ansible radi normalno, ili zašto je taj isti playbook do sada normalno radio, a posle ažuriranja počeo da se ponaša čudno — pa, Mitogen potencijalno može biti tvoj alat. Koristi, istražuj, piši članke — pročitati ću s interesovanjem.

Zašto ja lično ne koristim Mitogen? Zato što on funkcioniše samo dok su zadaci zaista jednostavni i sve ide dobro. Međutim, čim se blago skrene levo ili desno — sve, stiglo je: kao odgovor ti dolazi gomila nejasnih izuzetaka, a da za završetak slike nedostaje samo popularna fraza „svi hvala, svi slobodni“. U suštini, jednostavno ne želim da trošim vreme na otkrivanje uzroka još jednog „podzemnog udarca“.

Neki od ovih postavki otkriveni su tokom čitanja izvornog koda connection plugin-a s nazivom „ssh.py“. Delim rezultate čitanja u nadi da će to inspirisati još nekoga da pogleda u izvorne kodove, čita ih, proverava implementaciju, upoređuje sa dokumentacijom — jer će sve to pre ili kasnije doneti pozitivne rezultate. Srećno!

Samo registrovani korisnici mogu učestvovati u anketi. Prijavite se, molim vas.

Koje od navedenih Ansible postavki koristite da ubrzate svoje projekte?

  • 69,6%pipelining = true32

  • 34,8%gathering = smart/explicit16

  • 52,2%ssh_args = "-o ControlMaster=auto -o ControlPersist=…"24

  • 17,4%transfer_method = piped8

  • 63,0%forks = XXX29

  • 6,5%Ništa od ovoga, samo Mitogen3

  • 8,7%Mitogen + istaknuću koje od ovih postavki4

Glasalo je 46 korisnika. Uzdržalo se 21 korisnik.

Želite li još informacija o Ansible-u?

  • 78,3%da, naravno54

  • 21,7%da, samo želim više hardcore stvari!15

  • 0,0%ne, i ne treba mi0

  • 0,0%ne, prekomplikovano!!!0

Glasalo je 69 korisnika. Uzdržalo se 7 korisnika.

Izvor: habr.com

Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere 🔥 Kupite pouzdan hosting za sajtove uz zaštitu od DDoS, VPS VDS servere | ProHoster