🥇 Mitogen सह उत्तरदायी गती वाढवणे

उत्तर द्या सर्वात लोकप्रिय बनले सिस्टम कॉन्फिगरेशन व्यवस्थापन. नंतर Red Hat ने खरेदी केले होते 2015 मध्ये संख्या प्रकल्प सहभागी हजारो ओलांडले आणि Ansible कदाचित सर्वात जास्त वापरलेली तैनाती आणि ऑर्केस्ट्रेशन प्रणाली बनली. त्याच्या अनुप्रयोगांची विस्तृत श्रेणी खूप प्रभावी आहे.

रिमोट होस्टवर SSH कनेक्शनवर उत्तरदायी कार्य करते. हे एक SSH सत्र उघडते, लॉग इन करते, पायथन कोड नेटवर्कवर कॉपी करते आणि वेगळ्या तात्पुरत्या फाइलवर लिहिते. त्यानंतर, ती ही फाइल रिमोट मशीनवर चालवते. ऑपरेशन्सचा हा संपूर्ण क्रम बराच लांब आणि कंटाळवाणा आहे, म्हणून ते ऑप्टिमाइझ करण्याचे विविध मार्ग आहेत.

यापैकी एक मार्ग आहे SSH पाइपलाइन जे तुम्हाला प्रत्येक वेळी नवीन सत्र उघडण्याऐवजी सूचना कार्यान्वित करण्यासाठी एक SSH सत्र वापरण्याची परवानगी देते, ज्यामुळे आमचा बराच वेळ वाचू शकतो. (फक्त बंद करणे लक्षात ठेवा requiretty तुमच्या मध्ये sudo साठी सेटिंग /etc/sudoers रिमोट मशीनवर फाइल)

अँसिबल ओव्हरक्लॉक करण्याचा एक नवीन मार्ग म्हणजे पायथन लायब्ररी मिटोजेन. जर कोणी त्याबद्दल ऐकले नसेल, तर मी त्याच्या कार्यक्षमतेचे थोडक्यात वर्णन करेन. हे रिमोट मशीनवर पायथन कोड जलद अंमलात आणण्यास अनुमती देते आणि अॅन्सिबल हे वापराचे फक्त एक उदाहरण आहे. Mitogen रिमोट मशीनवर UNIX पाईप वापरते आणि zlib सह संकुचित केलेला आणि लोणच्यासह अनुक्रमित पायथन कोड हस्तांतरित करतो. हे जलद पूर्ण होण्यास मदत करते आणि रहदारी वाचवते. आपल्याला अधिक तपशीलवार स्पष्टीकरणात स्वारस्य असल्यास, पृष्ठावर त्याबद्दल वाचणे चांगले "हे कसे कार्य करते". पण आज आपण फक्त Ansible सोबत लायब्ररी कशी चालते यावर लक्ष केंद्रित करणार आहोत.

मिटोजेन काही विशिष्ट परिस्थितींमध्ये तुमच्या उत्तरदायी कोडचा वेग अनेक वेळा वाढवू शकतो आणि रहदारीचा वापर लक्षणीयरीत्या कमी करू शकतो. चला सर्वात लोकप्रिय वापर प्रकरणे तपासू आणि ते आम्हाला किती मदत करते ते पाहू.

रिमोट मशीनवर कॉन्फिगरेशन फाइल्स तयार करणे, पॅकेजेस स्थापित करणे, रिमोट मशीनवर आणि वरून फाइल्स कॉपी करणे यासाठी मी Ansible वापरतो. कदाचित तुमच्याकडे इतर उदाहरणे असतील - टिप्पण्यांमध्ये लिहा.

चला जाऊया!

Ansible साठी Mitogen कॉन्फिगरेशन खूप सोपे आहे:
Mitogen लायब्ररी स्थापित करा:

pip install mitogen

आता दोन समतुल्य मार्ग आहेत - एकतर ansible.cfg कॉन्फिगरेशन फाइलमधील पर्याय कॉन्फिगर करा किंवा आवश्यक पर्यावरण व्हेरिएबल्स सेट करा.

चला असे गृहीत धरू की स्थापित मिटोजेनचा मार्ग असेल /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy. मग:

export ANSIBLE_STRATEGY_PLUGINS=/usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy
export ANSIBLE_STRATEGY=mitogen_linear

किंवा

[defaults]
strategy = mitogen_linear
strategy_plugins = /usr/lib/python2.7/site-packages/ansible_mitogen/plugins/strategy

Mitogen सोबत आणि शिवाय वर्चुअलेनव्हमध्ये Ansible इंस्टॉल करू:

virtualenv mitogen_ansible
./mitogen_ansible/bin/pip install ansible==2.7.10 mitogen
virtualenv pure_ansible
./pure_ansible/bin/pip install ansible==2.7.10

कृपया लक्षात घ्या की Mitogen 0.2.7 Ansible 2.8 सह कार्य करत नाही (मे 2019 पर्यंत)

उपनावे तयार करणे:

alias pure-ansible-playbook='$(pwd)/pure_ansible/bin/ansible-playbook'
alias mitogen-ansible-playbook='ANSIBLE_STRATEGY_PLUGINS=$(pwd)/mitogen_ansible/lib/python3.7/site-packages/ansible_mitogen/plugins/strategy ANSIBLE_STRATEGY=mitogen_linear $(pwd)/mitogen_ansible/bin/ansible-playbook'

आता रिमोट मशीनवर फाइल्स तयार करणारे प्लेबुक चालवण्याचा प्रयत्न करूया:

---
- hosts: all
  gather_facts: false
  tasks:
    - name: Create files with copy content module
      copy:
        content: |
          test file {{ item }}
        dest: ~/file_{{ item }}
      with_sequence: start=1 end={{ n }}

आणि 10 फाइल्स तयार करण्यासाठी Mitogen सोबत आणि त्याशिवाय चालवूया:

time mitogen-ansible-playbook file_creation.yml -i hosts -e n=10 &>/dev/null

real    0m2.603s
user    0m1.152s
sys     0m0.096s

time pure-ansible-playbook file_creation.yml -i hosts -e n=10 &>/dev/null

real    0m5.908s
user    0m1.745s
sys     0m0.643s

आम्ही 2 पट सुधारणा पाहतो. चला 20, 30, ..., 100 फाईल्स तपासूया:

time pure-ansible-playbook file_creation.yml -i hosts -e n=100 &>/dev/null

real    0m51.775s
user    0m8.039s
sys     0m6.305s

time mitogen-ansible-playbook file_creation.yml -i hosts -e n=100 &>/dev/null

real    0m4.331s
user    0m1.903s
sys     0m0.197s

परिणामी, आम्ही 10 पेक्षा जास्त वेळा अंमलबजावणीची गती वाढवली!
आता भिन्न परिस्थिती वापरून पहा आणि आपल्यासाठी सर्वकाही किती जलद कार्य करते ते पाहू:

स्थानिक वरून रिमोट होस्टवर फाइल कॉपी करण्यासाठी स्क्रिप्ट (मॉड्यूलसह copy):
रिमोट होस्टवर फाइल्स तयार करण्यासाठी स्क्रिप्ट copy मॉड्यूल:
रिमोट होस्टवरून स्थानिक फायली डाउनलोड करण्याची परिस्थिती:

चला अनेक (3) रिमोट मशीनसह एक परिस्थिती वापरून पाहू, उदाहरणार्थ रिमोट होस्टवर फायली कॉपी करताना:

तुम्ही बघू शकता, Mitogen या परिस्थितींमध्ये आपला वेळ आणि रहदारी दोन्ही वाचवते. परंतु जर अडचण उत्तरदायी नसेल, परंतु उदाहरणार्थ डिस्क किंवा नेटवर्कच्या I/O मध्ये किंवा इतरत्र, तर मिटोजेन आपल्याला मदत करेल अशी अपेक्षा करणे कठीण आहे.

pip वापरून yum/dnf आणि python मॉड्युलसह पॅकेजेस स्थापित करण्यासाठी स्क्रिप्ट वापरून पाहू. नेटवर्क ग्लिचवर अवलंबून राहू नये म्हणून पॅकेजेस कॅशे केली गेली:

---
- hosts: all
  gather_facts: false
  tasks:
    - name: Install packages
      become: true
      package:
        name:
          - samba
          - httpd
          - nano
          - ruby
        state: present

    - name: Install pip modules
      become: true
      pip:
        name:
          - pytest-split-tests
          - bottle
          - pep8
          - flask
        state: present

Mitogen सह यास 12 सेकंद लागले, शिवाय सारखेच.
पानावर उत्तरदायी पृष्ठासाठी मिटोजेन तुम्ही इतर बेंचमार्क आणि चाचण्या पाहू शकता. पृष्ठ म्हणते म्हणून:

मायटोजेन मॉड्यूल चालू असताना त्याचा वेग वाढवू शकत नाही. हे केवळ या मॉड्यूलची अंमलबजावणी शक्य तितक्या जलद करू शकते.

त्यामुळे, तुमच्या तैनातीमधील अडथळे शोधणे महत्त्वाचे आहे आणि जर ते उत्तरदायित्वामुळे असतील, तर Mitogen तुम्हाला त्यांचे निराकरण करण्यात मदत करेल आणि तुमच्या प्लेबुकच्या अंमलबजावणीला लक्षणीय गती देईल.

स्त्रोत: www.habr.com

Mitogen सह उत्तरदायी गती वाढवणे

एक टिप्पणी जोडा Отменить ответ