🥇Akselere Ansible ak Mitogen

Ansible te vin youn nan pi popilè Jesyon Konfigirasyon Sistèm. Apre Red Hat te achte nan 2015 nimewo a patisipan pwojè yo depase dè milye ak Ansible te vin pwobableman sistèm deplwaman ak òkestrasyon ki pi itilize. Pakèt aplikasyon li yo trè enpresyonan.

Ansible travay sou koneksyon SSH ak lame aleka. Li louvri yon sesyon SSH, konekte, kopye kòd Python sou rezo a epi ekri li nan yon dosye tanporè apa. Apre sa, li kouri dosye sa a sou machin nan aleka. Tout sekans operasyon sa a se byen long ak fatigan, kidonk gen divès fason yo optimize li.

Youn nan fason sa yo se Tiyo SSH ki pèmèt ou sèvi ak yon sèl sesyon SSH pou egzekite enstriksyon, olye ke louvri yon nouvo sesyon chak fwa, ki ka sove nou anpil tan. (Jis sonje fèmen requiretty anviwònman pou sudo nan ou /etc/sudoers dosye sou machin aleka)

Yon nouvo fason pou overclock Ansible se yon bibliyotèk python ki rele Mitogen. Si yon moun pa te tande pale de li, mwen pral yon ti tan dekri fonksyonalite li yo. Li pèmèt ekzekisyon rapid nan kòd python sou yon machin aleka, ak Ansible se jis yon egzanp itilizasyon. Mitogen sèvi ak yon tiyo UNIX sou machin aleka a epi transfere kòd python konprese ak zlib ak seri ak pickle. Sa a ede ranpli li pi vit epi sove trafik. Si w enterese nan yon eksplikasyon ki pi detaye, li pi bon pou w li sou li sou paj la "Kijan li fonksyone". Men jodi a nou pral konsantre sèlman sou fason bibliyotèk la travay ak Ansible.

Mitogen nan sèten sikonstans ka akselere kòd Ansible ou plizyè fwa epi redwi anpil konsomasyon trafik. Ann tcheke ka itilizasyon ki pi popilè yo epi wè konbyen li ede nou.

Mwen itilize Ansible pi fò pou: kreye fichye konfigirasyon sou yon machin aleka, enstale pakè, kopye fichye pou ale ak soti nan machin aleka a. Petèt ou gen lòt egzanp - ekri nan kòmantè yo.

Ale!

Konfigirasyon Mitogen pou Ansible trè senp:
Enstale bibliyotèk Mitogen:

pip install mitogen

Koulye a, gen de fason ekivalan - swa konfigirasyon opsyon yo nan fichye konfigirasyon ansible.cfg, oswa mete varyab anviwònman ki nesesè yo.

Ann sipoze ke chemen an nan Mitogen enstale a pral /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy. Lè sa a:

export ANSIBLE_STRATEGY_PLUGINS=/usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy
export ANSIBLE_STRATEGY=mitogen_linear

oswa

[defaults]
strategy = mitogen_linear
strategy_plugins = /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy

Ann enstale Ansible nan virtualenv, avèk ak san Mitogen:

virtualenv mitogen_ansible
./mitogen_ansible/bin/pip install ansible==2.7.10 mitogen
virtualenv pure_ansible
./pure_ansible/bin/pip install ansible==2.7.10

Tanpri sonje ke Mitogen 0.2.7 pa travay ak Ansible 2.8 (apati mwa me 2019)

Fè alyas:

alias pure-ansible-playbook='$(pwd)/pure_ansible/bin/ansible-playbook'
alias mitogen-ansible-playbook='ANSIBLE_STRATEGY_PLUGINS=$(pwd)/mitogen_ansible/lib/python3.7/site-packages/ansible_mitogen/plugins/strategy ANSIBLE_STRATEGY=mitogen_linear $(pwd)/mitogen_ansible/bin/ansible-playbook'

Koulye a, ann eseye kouri yon liv ki kreye dosye sou yon machin aleka:

---
- hosts: all
  gather_facts: false
  tasks:
    - name: Create files with copy content module
      copy:
        content: |
          test file {{ item }}
        dest: ~/file_{{ item }}
      with_sequence: start=1 end={{ n }}

Epi ann kouri li avèk ak san Mitogen pou kreye 10 fichye:

time mitogen-ansible-playbook file_creation.yml -i hosts -e n=10 &>/dev/null

real    0m2.603s
user    0m1.152s
sys     0m0.096s

time pure-ansible-playbook file_creation.yml -i hosts -e n=10 &>/dev/null

real    0m5.908s
user    0m1.745s
sys     0m0.643s

Nou wè yon amelyorasyon 2 fwa. Ann tcheke pou 20, 30, ..., 100 fichye:

time pure-ansible-playbook file_creation.yml -i hosts -e n=100 &>/dev/null

real    0m51.775s
user    0m8.039s
sys     0m6.305s

time mitogen-ansible-playbook file_creation.yml -i hosts -e n=100 &>/dev/null

real    0m4.331s
user    0m1.903s
sys     0m0.197s

Kòm yon rezilta, nou akselere ekzekisyon pa plis pase 10 fwa!
Koulye a, ann eseye diferan senaryo epi wè konbyen pi vit tout bagay ap travay pou nou:

Script pou kopye dosye nan yon lame aleka ki soti nan yon lokal (ak modil la copy):
Script pou kreye dosye sou yon lame aleka avèk copy modil:
Senaryo ak telechaje fichye ki soti nan yon lame aleka nan yon lame lokal:

Ann eseye yon senaryo ak plizyè (3) machin aleka, pou egzanp yon senaryo ak kopye fichye nan yon lame aleka:

Kòm ou ka wè, Mitogen sove nou tou de tan ak trafik nan senaryo sa yo. Men, si kou boutèy la pa nan Ansible, men pou egzanp nan I / O nan yon disk oswa rezo, oswa yon lòt kote, Lè sa a, li difisil a atann ke Mitogen pral ede nou.

Ann eseye yon script ak enstale pakè ak yum/dnf ak modil python lè l sèvi avèk pip. Pakè yo te nan kachèt pou yo pa depann de pwoblèm rezo a:

---
- hosts: all
  gather_facts: false
  tasks:
    - name: Install packages
      become: true
      package:
        name:
          - samba
          - httpd
          - nano
          - ruby
        state: present

    - name: Install pip modules
      become: true
      pip:
        name:
          - pytest-split-tests
          - bottle
          - pep8
          - flask
        state: present

Avèk Mitogen li te pran 12 segonn, menm jan ak san li.
Nan paj la Mitogen pou paj Ansible ou ka gade lòt referans ak tès yo. Jan paj la di:

Mitogen pa ka akselere modil la lè li ap kouri. Li ka sèlman fè ekzekisyon an nan modil sa a osi vit ke posib.

Se poutèt sa, li enpòtan pou jwenn blokaj ou yo nan deplwaman ou epi si yo akòz Ansible, Lè sa a, Mitogen pral ede w rezoud yo ak siyifikativman akselere ekzekisyon liv ou yo.

Sous: www.habr.com

Akselere Ansible ak Mitogen

Add nouvo kòmantè Anile reply