Mitogen ile Ansible'ı Hızlandırma

yanıtlayıcı ' en popülerlerinden biri oldu Sistem Konfigürasyon Yönetimi... Sonrasında Red Hat tarafından satın alındı 2015 yılında sayı proje katılımcıları Binlerceyi aştı ve Ansible muhtemelen en çok kullanılan dağıtım ve düzenleme sistemi haline geldi. Geniş uygulama yelpazesi oldukça etkileyicidir.

Ansible, uzak ana bilgisayarlara SSH bağlantıları üzerinden çalışır. Bir SSH oturumu açar, oturum açar, Python kodunu ağ üzerinden kopyalar ve ayrı bir geçici dosyaya yazar. Daha sonra bu dosyayı uzaktaki makinede çalıştırır. Tüm bu işlem sırası oldukça uzun ve sıkıcı olduğundan, bunu optimize etmenin çeşitli yolları vardır.

Bu yollardan biri SSH boru hatları Bu, her seferinde yeni bir oturum açmak yerine, talimatları yürütmek için bir SSH oturumu kullanmanıza olanak tanır ve bu da bize çok zaman kazandırabilir. (Sadece kapatmayı unutmayın requiretty cihazınızda sudo ayarı /etc/sudoers uzak makinedeki dosya)

Ansible'da hız aşırtma yapmanın yeni bir yolu, adı verilen bir python kütüphanesidir. Mitojen. Kimse duymadıysa, işlevselliğini kısaca anlatacağım. Python kodunun uzaktaki bir makinede hızlı bir şekilde yürütülmesine olanak tanır ve Ansible, kullanım örneklerinden yalnızca biridir. Mitogen uzak makinede bir UNIX kanalı kullanır ve zlib ile sıkıştırılmış ve turşu ile serileştirilmiş python kodunu aktarır. Bu, işlemin daha hızlı tamamlanmasına yardımcı olur ve trafikten tasarruf sağlar. Daha ayrıntılı bir açıklama ilginizi çekiyorsa, bu konuyu sayfada okumak en iyisidir. "Nasıl çalışır". Ancak bugün yalnızca kütüphanenin Ansible ile nasıl çalıştığına odaklanacağız.

Mitogen belirli durumlarda Ansible kodunuzu birkaç kez hızlandırabilir ve trafik tüketimini önemli ölçüde azaltabilir. En popüler kullanım örneklerine göz atalım ve bunların bize ne kadar yardımcı olduğunu görelim.

Ansible'ı en çok şu amaçlarla kullanıyorum: uzaktaki bir makinede yapılandırma dosyaları oluşturmak, paketleri yüklemek, dosyaları uzak makineye ve uzak makineden kopyalamak. Belki başka örnekleriniz vardır - yorumları yazın.

Hadi gidelim!

Ansible için Mitogen konfigürasyonu çok basittir:
Mitogen kütüphanesini yükleyin:

pip install mitogen

Artık iki eşdeğer yol var; ya ansible.cfg yapılandırma dosyasındaki seçenekleri yapılandırın ya da gerekli ortam değişkenlerini ayarlayın.

Kurulu Mitogen'e giden yolun olacağını varsayalım. /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy. O zamanlar:

export ANSIBLE_STRATEGY_PLUGINS=/usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy
export ANSIBLE_STRATEGY=mitogen_linear

veya

[defaults]
strategy = mitogen_linear
strategy_plugins = /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy

Ansible'ı Mitogen ile ve Mitogen olmadan virtualenv'e kuralım:

virtualenv mitogen_ansible
./mitogen_ansible/bin/pip install ansible==2.7.10 mitogen
virtualenv pure_ansible
./pure_ansible/bin/pip install ansible==2.7.10

Lütfen Mitogen 0.2.7'nin Ansible 2.8 ile çalışmadığını unutmayın (Mayıs 2019 itibarıyla)

Takma ad oluşturma:

alias pure-ansible-playbook='$(pwd)/pure_ansible/bin/ansible-playbook'
alias mitogen-ansible-playbook='ANSIBLE_STRATEGY_PLUGINS=$(pwd)/mitogen_ansible/lib/python3.7/site-packages/ansible_mitogen/plugins/strategy ANSIBLE_STRATEGY=mitogen_linear $(pwd)/mitogen_ansible/bin/ansible-playbook'

Şimdi uzaktaki bir makinede dosyalar oluşturan bir çalışma kitabını çalıştırmayı deneyelim:

---
- hosts: all
  gather_facts: false
  tasks:
    - name: Create files with copy content module
      copy:
        content: |
          test file {{ item }}
        dest: ~/file_{{ item }}
      with_sequence: start=1 end={{ n }}

Ve 10 dosya oluşturmak için Mitogen ile ve Mitogen olmadan çalıştıralım:

time mitogen-ansible-playbook file_creation.yml -i hosts -e n=10 &>/dev/null

real    0m2.603s
user    0m1.152s
sys     0m0.096s

time pure-ansible-playbook file_creation.yml -i hosts -e n=10 &>/dev/null

real    0m5.908s
user    0m1.745s
sys     0m0.643s

2 kat iyileşme görüyoruz. 20, 30, ..., 100 dosyayı kontrol edelim:

time pure-ansible-playbook file_creation.yml -i hosts -e n=100 &>/dev/null

real    0m51.775s
user    0m8.039s
sys     0m6.305s

time mitogen-ansible-playbook file_creation.yml -i hosts -e n=100 &>/dev/null

real    0m4.331s
user    0m1.903s
sys     0m0.197s

Sonuç olarak, yürütmeyi 10 kattan fazla hızlandırdık!
Şimdi farklı senaryoları deneyelim ve her şeyin bizim için ne kadar hızlı çalıştığını görelim:

  • Dosyaları yerel bir ana bilgisayardan uzak bir ana bilgisayara kopyalamak için komut dosyası (modülle birlikte) copy):
    Mitogen ile Ansible'ı Hızlandırma

  • Uzak bir ana bilgisayarda dosya oluşturmak için komut dosyası copy modül:
    Mitogen ile Ansible'ı Hızlandırma

  • Uzak bir ana bilgisayardan yerel bir ana bilgisayara dosya indirme senaryosu:
    Mitogen ile Ansible'ı Hızlandırma

Birkaç (3) uzak makine içeren bir senaryoyu deneyelim; örneğin, dosyaların uzak bir ana bilgisayara kopyalandığı bir senaryo:
Mitogen ile Ansible'ı Hızlandırma

Gördüğünüz gibi Mitogen bu senaryolarda bize hem zaman hem de trafik tasarrufu sağlıyor. Ancak darboğaz Ansible'da değilse, örneğin bir diskin veya ağın G/Ç'sinde veya başka bir yerdeyse Mitogen'in bize yardım etmesini beklemek zor.

Pip kullanarak yum/dnf ve python modüllerine sahip paketleri kuran bir betik deneyelim. Paketler, ağ aksaklıklarına bağlı olmayacak şekilde önbelleğe alındı:

---
- hosts: all
  gather_facts: false
  tasks:
    - name: Install packages
      become: true
      package:
        name:
          - samba
          - httpd
          - nano
          - ruby
        state: present

    - name: Install pip modules
      become: true
      pip:
        name:
          - pytest-split-tests
          - bottle
          - pep8
          - flask
        state: present

Mitogen ile bu, onsuz olduğu gibi 12 saniye sürdü.
Sayfasında Ansible sayfası için Mitojen diğer kıyaslamalara ve testlere bakabilirsiniz. Sayfada belirtildiği gibi:

Mitogen, çalışırken modülü hızlandıramaz. Yalnızca bu modülün yürütülmesini mümkün olduğu kadar hızlı hale getirebilir.

Bu nedenle dağıtımınızdaki darboğazları bulmanız önemlidir ve eğer bunlar Ansible'dan kaynaklanıyorsa Mitogen bunları çözmenize yardımcı olacak ve oyun kitaplarınızın yürütülmesini önemli ölçüde hızlandıracaktır.

Kaynak: habr.com

Yorum ekle