ক্লাউডে ভার্চুয়াল মেশিনের একটি ক্লাস্টারে উত্তরযোগ্য + অটো গিট টান

শুভ দিন

আমাদের কাছে বেশ কয়েকটি ক্লাউড ক্লাস্টার রয়েছে যার প্রতিটিতে প্রচুর সংখ্যক ভার্চুয়াল মেশিন রয়েছে। আমরা Hetzner এই পুরো ব্যবসা হোস্ট. প্রতিটি ক্লাস্টারে আমাদের একটি মাস্টার মেশিন রয়েছে, এটি থেকে একটি স্ন্যাপশট নেওয়া হয় এবং ক্লাস্টারের মধ্যে থাকা সমস্ত ভার্চুয়াল মেশিনে স্বয়ংক্রিয়ভাবে বিতরণ করা হয়।

এই স্কিমটি আমাদের সাধারণত গিটল্যাব-রানার ব্যবহার করার অনুমতি দেয় না, যেহেতু অনেকগুলি অভিন্ন নিবন্ধিত রানার উপস্থিত হলে অনেক সমস্যা দেখা দেয়, যা আমাদেরকে একটি সমাধান খুঁজে বের করতে এবং এই নিবন্ধ/ম্যানুয়ালটি লিখতে প্ররোচিত করে।

এটি সম্ভবত সেরা অনুশীলন নয়, তবে এই সমাধানটি যতটা সম্ভব সুবিধাজনক এবং সহজ বলে মনে হয়েছিল।

টিউটোরিয়ালের জন্য, অনুগ্রহ করে বিড়ালটি দেখুন।

মাস্টার মেশিনে প্রয়োজনীয় প্যাকেজ:

• পাইথন
• ফালতু বা এলেবেলে লোক
• ssh কী সহ ফাইল

সমস্ত ভার্চুয়াল মেশিনে স্বয়ংক্রিয় অন্ত্রের টান প্রয়োগ করার সাধারণ নীতি হল যে আপনার একটি মেশিন দরকার যার উপর Ansible ইনস্টল করা হবে। এই মেশিন থেকে, ansible গিট পুল কমান্ড পাঠাবে এবং আপডেট করা পরিষেবাটি পুনরায় চালু করবে। এই উদ্দেশ্যে, আমরা ক্লাস্টারগুলির বাইরে একটি পৃথক ভার্চুয়াল মেশিন তৈরি করেছি এবং এটিতে ইনস্টল করেছি:

• পাইথন
• ansible
• gitlab-রানার

সাংগঠনিক সমস্যা থেকে - আপনাকে গিটল্যাব-রানার নিবন্ধন করতে হবে, ssh-keygen তৈরি করতে হবে, এই মেশিনের সর্বজনীন ssh কী আপলোড করতে হবে .ssh/authorized_keys মাস্টার মেশিনে, মাস্টার মেশিনে উত্তর দেওয়ার জন্য পোর্ট 22 খুলুন।

এখন এর ansible কনফিগার করা যাক

যেহেতু আমাদের লক্ষ্য সব কিছু স্বয়ংক্রিয়ভাবে সম্ভব। ফাইলে /etc/ansible/ansible.cfg আমরা লাইনটি আনকমেন্ট করব host_key_checking = Falseযাতে উত্তরদাতারা নতুন মেশিনের নিশ্চিতকরণের জন্য জিজ্ঞাসা না করে।

এর পরে, আপনাকে স্বয়ংক্রিয়ভাবে উত্তরের জন্য একটি ইনভেন্টরি ফাইল তৈরি করতে হবে, যেখান থেকে এটি সেই মেশিনগুলির আইপি নেবে যেখানে আপনাকে গিট পুল করতে হবে।

আমরা Hetzner's API ব্যবহার করে এই ফাইলটি তৈরি করি, আপনি আপনার AWS, Asure, ডাটাবেস থেকে হোস্টের তালিকা নিতে পারেন (আপনার চলমান মেশিনগুলি প্রদর্শন করার জন্য কোথাও একটি API আছে, তাই না?)।

ইনভেন্টরি ফাইলের গঠন Ansible-এর জন্য খুবই গুরুত্বপূর্ণ; এটি দেখতে এরকম হওয়া উচিত:

[группа]
ip-адрес
ip-адрес

[группа2]
ip-адрес
ip-адрес

এই ধরনের একটি ফাইল তৈরি করতে, আমরা একটি সাধারণ স্ক্রিপ্ট তৈরি করব (আসুন এটিকে কল করি vm_list):

#!/bin/bash
echo [group] > /etc/ansible/cloud_ip &&
"ваш CLI запрос на получение IP запущенных машин в кластере"  >> /etc/ansible/cloud_ip
echo " " >> /etc/ansible/cloud_ip
echo [group2] > /etc/ansible/cloud_ip &&
"ваш CLI запрос на получение IP запущенных машин в другом кластере"  >> /etc/ansible/cloud_ip

এটি পরীক্ষা করার সময় এসেছে যে Ansible কাজ করে এবং IP ঠিকানা গ্রহণের সাথে বন্ধুত্বপূর্ণ:

/etc/ansible/./vm_list && ansible -i /etc/ansible/cloud_ip -m shell -a 'hostname' group

আউটপুটটিতে সেই মেশিনগুলির হোস্টনাম থাকা উচিত যেখানে কমান্ডটি কার্যকর করা হয়েছিল।
সিনট্যাক্স সম্পর্কে কয়েকটি শব্দ:

• /etc/ansible/./vm_list - মেশিনের একটি তালিকা তৈরি করুন
• -i - ইনভেন্টরি ফাইলের পরম পথ
• -m - শেল মডিউল ব্যবহার করার জন্য উত্তরযোগ্য বলুন
• -একটি যুক্তি। যে কোন কমান্ড এখানে প্রবেশ করা যেতে পারে
• গ্রুপ - আপনার ক্লাস্টারের নাম। আপনার যদি সমস্ত ক্লাস্টারে এটি করার প্রয়োজন হয় তবে সকলে গোষ্ঠী পরিবর্তন করুন

আসুন আরও এগিয়ে যাই - আসুন আমাদের ভার্চুয়াল মেশিনগুলিতে গিট টান করার চেষ্টা করি:

/etc/ansible/./vm_list && ansible -i /etc/ansible/cloud_ip -m shell -a 'cd /path/to/project && git pull' group 

যদি আউটপুটে আমরা ইতিমধ্যেই আপ টু ডেট বা সংগ্রহস্থল থেকে আনলোড দেখতে পাই, তাহলে সবকিছু কাজ করছে।

এখন এই সব জন্য বোঝানো হয়েছে কি

গিটল্যাবে মাস্টার ব্রাঞ্চে প্রতিশ্রুতি দেওয়ার সময় আমাদের স্ক্রিপ্টটি স্বয়ংক্রিয়ভাবে চালানো শেখান

প্রথমে, আসুন আমাদের স্ক্রিপ্টটিকে আরও সুন্দর করে তুলুন এবং এটিকে একটি এক্সিকিউটেবল ফাইলে রাখি (আসুন একে exec_pull বলি) -

#!/bin/bash

/etc/ansible/./get_vms && ansible -i /etc/ansible/cloud_ip -m shell -a "$@"

আসুন আমাদের গিটল্যাবে যান এবং প্রকল্পে একটি ফাইল তৈরি করি .gitlab-ci.yml
আমরা ভিতরে নিম্নলিখিত রাখি:

variables:
  GIT_STRATEGY: none
  VM_GROUP: group

stages:
  - pull
  - restart

run_exec_pull:
  stage: pull
  script:
  
   - /etc/ansible/exec_pull 'cd /path/to/project/'$CI_PROJECT_NAME' && git pull' $VM_GROUP
  
  only:
  - master

run_service_restart:
  stage: restart
  script:
 
   - /etc/ansible/exec_pull 'your_app_stop && your_app_start' $VM_GROUP
   
  only:
  - master 

সব প্রস্তুত. এখন -

• একটি অঙ্গীকার করা
• আমি খুশি যে সবকিছু কাজ করছে

অন্যান্য প্রকল্পে .yml স্থানান্তর করার সময়, আপনাকে পুনরায় চালু করার জন্য পরিষেবার নাম এবং ক্লাস্টারের নাম পরিবর্তন করতে হবে যেখানে উত্তরযোগ্য কমান্ডগুলি কার্যকর করা হবে৷

উত্স: www.habr.com