Ansible pagreitinimas naudojant Mitogen

Galimas tapo vienu populiariausių Sistemos konfigūracijos valdymas. Po to įsigijo Red Hat 2015 metais skaičius projekto dalyviai viršijo tūkstančius ir Ansible tapo bene dažniausiai naudojama dislokavimo ir orkestravimo sistema. Jo platus pritaikymo spektras yra labai įspūdingas.

Ansible veikia per SSH ryšius su nuotoliniais pagrindiniais kompiuteriais. Jis atidaro SSH seansą, prisijungia, nukopijuoja Python kodą tinkle ir įrašo jį į atskirą laikiną failą. Po to jis paleidžia šį failą nuotoliniame kompiuteryje. Visa ši operacijų seka yra gana ilga ir varginanti, todėl yra įvairių būdų ją optimizuoti.

Vienas iš šių būdų yra SSH vamzdynai leidžia naudoti vieną SSH seansą instrukcijoms vykdyti, o ne kiekvieną kartą atidaryti naują seansą, o tai gali sutaupyti daug laiko. (Tiesiog nepamirškite išjungti requiretty sudo nustatymas jūsų /etc/sudoers failas nuotoliniame kompiuteryje)

Naujas būdas perjungti Ansible yra python biblioteka, vadinama Mitogenas. Jei kas apie tai negirdėjo, trumpai apibūdinsiu jo funkcionalumą. Tai leidžia greitai vykdyti python kodą nuotoliniame kompiuteryje, o Ansible yra tik vienas naudojimo pavyzdys. „Mitogen“ nuotoliniame kompiuteryje naudoja UNIX vamzdį ir perduoda python kodą, suspaustą su zlib ir serializuotą su pipiru. Tai padeda greičiau užbaigti ir taupo srautą. Jei jus domina išsamesnis paaiškinimas, geriausia apie tai paskaityti puslapyje "Kaip tai veikia". Tačiau šiandien mes sutelksime dėmesį tik į tai, kaip biblioteka veikia su Ansible.

Mitogenas tam tikromis aplinkybėmis gali kelis kartus pagreitinti jūsų Ansible kodą ir žymiai sumažinti srautą. Panagrinėkime populiariausius naudojimo atvejus ir pažiūrėkime, kiek tai mums padeda.

Aš dažniausiai naudoju Ansible: kurti konfigūracijos failus nuotoliniame kompiuteryje, įdiegti paketus, kopijuoti failus į nuotolinį įrenginį ir iš jo. Galbūt turite kitų pavyzdžių - parašykite komentaruose.

Eikime!

„Ansible“ mitogeno konfigūracija yra labai paprasta:
Įdiekite Mitogen biblioteką:

pip install mitogen

Dabar yra du lygiaverčiai būdai – arba konfigūruoti parinktis ansible.cfg konfigūracijos faile, arba nustatyti reikiamus aplinkos kintamuosius.

Tarkime, kad kelias į įdiegtą Mitogeną bus /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy. Tada:

export ANSIBLE_STRATEGY_PLUGINS=/usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy
export ANSIBLE_STRATEGY=mitogen_linear

arba

[defaults]
strategy = mitogen_linear
strategy_plugins = /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy

Įdiegkime Ansible į virtualenv, su Mitogen ir be jo:

virtualenv mitogen_ansible
./mitogen_ansible/bin/pip install ansible==2.7.10 mitogen
virtualenv pure_ansible
./pure_ansible/bin/pip install ansible==2.7.10

Atminkite, kad Mitogen 0.2.7 neveikia su Ansible 2.8 (2019 m. gegužės mėn.)

Pseudonimų kūrimas:

alias pure-ansible-playbook='$(pwd)/pure_ansible/bin/ansible-playbook'
alias mitogen-ansible-playbook='ANSIBLE_STRATEGY_PLUGINS=$(pwd)/mitogen_ansible/lib/python3.7/site-packages/ansible_mitogen/plugins/strategy ANSIBLE_STRATEGY=mitogen_linear $(pwd)/mitogen_ansible/bin/ansible-playbook'

Dabar pabandykime paleisti žaidimų knygą, kuri kuria failus nuotoliniame kompiuteryje:

---
- hosts: all
  gather_facts: false
  tasks:
    - name: Create files with copy content module
      copy:
        content: |
          test file {{ item }}
        dest: ~/file_{{ item }}
      with_sequence: start=1 end={{ n }}

Paleiskite jį su Mitogen ir be jo, kad sukurtume 10 failų:

time mitogen-ansible-playbook file_creation.yml -i hosts -e n=10 &>/dev/null

real    0m2.603s
user    0m1.152s
sys     0m0.096s

time pure-ansible-playbook file_creation.yml -i hosts -e n=10 &>/dev/null

real    0m5.908s
user    0m1.745s
sys     0m0.643s

Matome 2 kartus pagerėjimą. Patikrinkime 20, 30, ..., 100 failų:

time pure-ansible-playbook file_creation.yml -i hosts -e n=100 &>/dev/null

real    0m51.775s
user    0m8.039s
sys     0m6.305s

time mitogen-ansible-playbook file_creation.yml -i hosts -e n=100 &>/dev/null

real    0m4.331s
user    0m1.903s
sys     0m0.197s

Dėl to mes pagreitinome vykdymą daugiau nei 10 kartų!
Dabar pabandykime skirtingus scenarijus ir pažiūrėkime, kiek greičiau viskas veikia mums:

  • Scenarijus, skirtas failams kopijuoti į nuotolinį pagrindinį kompiuterį iš vietinio (su moduliu copy):
    Ansible pagreitinimas naudojant Mitogen

  • Scenarijus, skirtas failams kurti nuotoliniame pagrindiniame kompiuteryje su copy modulis:
    Ansible pagreitinimas naudojant Mitogen

  • Scenarijus atsisiunčiant failus iš nuotolinio pagrindinio kompiuterio į vietinį:
    Ansible pagreitinimas naudojant Mitogen

Išbandykime scenarijų su keliais (3) nuotoliniais įrenginiais, pavyzdžiui, scenarijų su failų kopijavimu į nuotolinį pagrindinį kompiuterį:
Ansible pagreitinimas naudojant Mitogen

Kaip matote, „Mitogen“ sutaupo mūsų laiką ir srautą šiais atvejais. Bet jei kliūtis yra ne Ansible, o, pavyzdžiui, disko ar tinklo įvesties / išvesties arba kur nors kitur, tada sunku tikėtis, kad Mitogen mums padės.

Išbandykime scenarijų įdiegdami paketus su yum/dnf ir python moduliais naudodami pip. Paketai buvo saugomi talpykloje, kad nepriklausytų nuo tinklo trikdžių:

---
- hosts: all
  gather_facts: false
  tasks:
    - name: Install packages
      become: true
      package:
        name:
          - samba
          - httpd
          - nano
          - ruby
        state: present

    - name: Install pip modules
      become: true
      pip:
        name:
          - pytest-split-tests
          - bottle
          - pep8
          - flask
        state: present

Su Mitogen užtruko 12 sekundžių, tiek pat, kiek ir be jo.
Puslapyje Mitogen for Ansible puslapis galite peržiūrėti kitus etalonus ir testus. Kaip rašoma puslapyje:

Mitogenas negali pagreitinti modulio, kai jis veikia. Tai gali tik pagreitinti šio modulio vykdymą.

Todėl svarbu rasti savo diegimo kliūtis ir, jei jos kyla dėl Ansible, Mitogen padės jas išspręsti ir žymiai pagreitins jūsų planų vykdymą.

Šaltinis: www.habr.com

Добавить комментарий