Proxmox VE-তে ক্লাস্টারিং

অতীতের নিবন্ধগুলিতে, আমরা Proxmox VE কী এবং এটি কীভাবে কাজ করে সে সম্পর্কে কথা বলা শুরু করেছি। আজ আমরা আলোচনা করব কীভাবে আপনি ক্লাস্টারিংয়ের সম্ভাবনা ব্যবহার করতে পারেন এবং এটি কী সুবিধা দেয় তা দেখান।

একটি ক্লাস্টার কি এবং কেন এটি প্রয়োজন? একটি ক্লাস্টার (ইংরেজি ক্লাস্টার থেকে) হল উচ্চ-গতির যোগাযোগের চ্যানেলগুলির দ্বারা একত্রিত সার্ভারগুলির একটি গ্রুপ, কাজ করে এবং ব্যবহারকারীর কাছে এককভাবে প্রদর্শিত হয়। একটি ক্লাস্টার ব্যবহার করার জন্য বেশ কয়েকটি প্রধান পরিস্থিতি রয়েছে:

• দোষ সহনশীলতা প্রদান (উচ্চ প্রাপ্যতা).
• লোড ব্যালেন্সিং (লোড ব্যালেন্সিং)।
• উৎপাদনশীলতা বৃদ্ধি (উচ্চ কার্যকারিতা).
• ডিস্ট্রিবিউটেড কম্পিউটিং সম্পাদন করা (ডিস্ট্রিবিউটেড কম্পিউটিং).

ক্লাস্টার সদস্যদের জন্য প্রতিটি দৃশ্যের নিজস্ব প্রয়োজনীয়তা রয়েছে। উদাহরণস্বরূপ, একটি ক্লাস্টারের জন্য যা বিতরণ করা কম্পিউটিং সম্পাদন করে, প্রধান প্রয়োজন হল ফ্লোটিং পয়েন্ট অপারেশনের উচ্চ গতি এবং কম নেটওয়ার্ক লেটেন্সি। এই ধরনের ক্লাস্টারগুলি প্রায়ই গবেষণার উদ্দেশ্যে ব্যবহার করা হয়।

যেহেতু আমরা ডিস্ট্রিবিউটেড কম্পিউটিং এর বিষয়ে স্পর্শ করেছি, তাই আমি লক্ষ্য করতে চাই যে এমন একটি জিনিসও রয়েছে গ্রিড সিস্টেম (ইংরেজি গ্রিড থেকে - জালি, নেটওয়ার্ক)। সাধারণ মিল থাকা সত্ত্বেও, গ্রিড সিস্টেম এবং ক্লাস্টারকে বিভ্রান্ত করবেন না। গ্রিড স্বাভাবিক অর্থে একটি ক্লাস্টার নয়। একটি ক্লাস্টারের বিপরীতে, গ্রিডে অন্তর্ভুক্ত নোডগুলি প্রায়শই ভিন্ন এবং কম প্রাপ্যতা দ্বারা চিহ্নিত করা হয়। এই পদ্ধতিটি বিতরণ করা কম্পিউটিং সমস্যার সমাধানকে সহজ করে, কিন্তু নোড থেকে একটি সম্পূর্ণ তৈরি করার অনুমতি দেয় না।

একটি গ্রিড সিস্টেমের একটি আকর্ষণীয় উদাহরণ একটি জনপ্রিয় কম্পিউটিং প্ল্যাটফর্ম BOIN (নেটওয়ার্ক কম্পিউটিং এর জন্য বার্কলে ওপেন ইনফ্রাস্ট্রাকচার)। এই প্ল্যাটফর্মটি মূলত প্রকল্পের জন্য তৈরি করা হয়েছিল এসটিটি @ বাড়িতে (সার্চ ফর এক্সট্রা-টেরেস্ট্রিয়াল ইন্টেলিজেন্স অ্যাট হোম), রেডিও সিগন্যাল বিশ্লেষণ করে এক্সট্রা টেরেস্ট্রিয়াল ইন্টেলিজেন্স খোঁজার সমস্যা মোকাবেলা করা।

এগুলো কিভাবে কাজ করেরেডিও টেলিস্কোপ থেকে প্রাপ্ত ডেটার একটি বিশাল অ্যারেকে অনেক ছোট ছোট টুকরোতে বিভক্ত করা হয় এবং সেগুলিকে গ্রিড সিস্টেমের নোডে পাঠানো হয় (SETI@home প্রকল্পে, স্বেচ্ছাসেবক কম্পিউটারগুলি এই ধরনের নোডগুলির ভূমিকা পালন করে)। নোডগুলিতে ডেটা প্রক্রিয়া করা হয় এবং প্রক্রিয়াকরণ সম্পন্ন হওয়ার পরে, এটি SETI প্রকল্পের কেন্দ্রীয় সার্ভারে পাঠানো হয়। এইভাবে, প্রকল্পটি তার নিষ্পত্তিতে প্রয়োজনীয় কম্পিউটিং শক্তি ছাড়াই সবচেয়ে জটিল বৈশ্বিক সমস্যার সমাধান করে।

এখন যেহেতু ক্লাস্টার কী সে সম্পর্কে আমাদের স্পষ্ট ধারণা রয়েছে, আমরা এটি কীভাবে তৈরি এবং ব্যবহার করা যায় তা বিবেচনা করার প্রস্তাব দিই। আমরা একটি ওপেন সোর্স ভার্চুয়ালাইজেশন সিস্টেম ব্যবহার করব প্রক্সমক্স ভিই.

একটি ক্লাস্টার তৈরি করা শুরু করার আগে প্রক্সমক্সের সীমাবদ্ধতা এবং সিস্টেমের প্রয়োজনীয়তাগুলি স্পষ্টভাবে বোঝা বিশেষভাবে গুরুত্বপূর্ণ, যথা:

• একটি ক্লাস্টারে সর্বাধিক সংখ্যক নোড - 32;
• সব নোড থাকতে হবে Proxmox এর একই সংস্করণ (ব্যতিক্রম আছে, কিন্তু তারা উৎপাদনের জন্য সুপারিশ করা হয় না);
• যদি ভবিষ্যতে এটি উচ্চ প্রাপ্যতা কার্যকারিতা ব্যবহার করার পরিকল্পনা করা হয়, তাহলে ক্লাস্টার থাকা উচিত কমপক্ষে 3 নোড;
• নোডগুলি একে অপরের সাথে যোগাযোগের জন্য পোর্টগুলি অবশ্যই খোলা থাকতে হবে UDP/5404, UDP/5405 কোরোসিঙ্কের জন্য এবং TCP/22 SSH এর জন্য;
• নোডের মধ্যে নেটওয়ার্ক বিলম্ব অতিক্রম করা উচিত নয় 2 মি.

একটি ক্লাস্টার তৈরি করুন

গুরুত্বপূর্ণ ! নিম্নলিখিত কনফিগারেশন একটি পরীক্ষা এক. সঙ্গে চেক করতে ভুলবেন না অফিসিয়াল ডকুমেন্টেশন প্রক্সমক্স ভিই।

একটি পরীক্ষা ক্লাস্টার চালানোর জন্য, আমরা একই কনফিগারেশন (2 কোর, 2 GB RAM) সহ ইনস্টল করা Proxmox হাইপারভাইজার সহ তিনটি সার্ভার নিয়েছি।

আপনি যদি জানতে চান কিভাবে আপনি Proxmox ইনস্টল করতে পারেন, তাহলে আমরা আমাদের পূর্ববর্তী নিবন্ধটি পড়ার পরামর্শ দিই- ভার্চুয়ালাইজেশনের জাদু: প্রক্সমক্স ভিই-তে একটি প্রাথমিক কোর্স.

প্রাথমিকভাবে, OS ইনস্টল করার পরে, একটি একক সার্ভার চলে স্বতন্ত্র-মোড.

বোতামে ক্লিক করে একটি ক্লাস্টার তৈরি করুন ক্লাস্টার তৈরি করুন প্রাসঙ্গিক বিভাগে।

আমরা ভবিষ্যতের ক্লাস্টারের জন্য একটি নাম সেট করি এবং একটি সক্রিয় নেটওয়ার্ক সংযোগ নির্বাচন করি।

Create বাটনে ক্লিক করুন। সার্ভার একটি 2048-বিট কী তৈরি করবে এবং কনফিগারেশন ফাইলগুলিতে নতুন ক্লাস্টারের পরামিতি সহ এটি লিখবে।

লিপি টাস্ক ঠিক আছে অপারেশনের সফল সমাপ্তি নির্দেশ করে। এখন, সিস্টেম সম্পর্কে সাধারণ তথ্যের দিকে তাকালে দেখা যাবে যে সার্ভারটি ক্লাস্টার মোডে স্যুইচ করেছে। এখনও অবধি, ক্লাস্টারে শুধুমাত্র একটি নোড রয়েছে, অর্থাৎ, এটিতে এখনও এমন ক্ষমতা নেই যার জন্য একটি ক্লাস্টার প্রয়োজন।

একটি ক্লাস্টার যোগদান

তৈরি ক্লাস্টারে সংযোগ করার আগে, সংযোগটি সম্পূর্ণ করার জন্য আমাদের তথ্য পেতে হবে। এটি করতে, বিভাগে যান গুচ্ছ нажимаем তথ্য যোগদান.

যে উইন্ডোটি খোলে, আমরা একই নামের ক্ষেত্রের বিষয়বস্তুতে আগ্রহী। এটা কপি করা প্রয়োজন হবে.

সমস্ত প্রয়োজনীয় সংযোগ পরামিতি এখানে এনকোড করা হয়েছে: সংযোগের জন্য সার্ভার ঠিকানা এবং ডিজিটাল ফিঙ্গারপ্রিন্ট। আমরা সেই সার্ভারে যাই যা ক্লাস্টারে অন্তর্ভুক্ত করা দরকার। আমরা বোতাম টিপুন ক্লাস্টারে যোগ দিন এবং যে উইন্ডোটি খোলে সেখানে কপি করা বিষয়বস্তু পেস্ট করুন।

ক্ষেত্র পিয়ার ঠিকানা и অঙ্গুলাঙ্ক স্বয়ংক্রিয়ভাবে পূরণ করা হবে। নোড নম্বর 1 এর জন্য রুট পাসওয়ার্ড লিখুন, নেটওয়ার্ক সংযোগ নির্বাচন করুন এবং বোতাম টিপুন যোগদান.

একটি ক্লাস্টারে যোগদানের প্রক্রিয়া চলাকালীন, GUI ওয়েব পৃষ্ঠা আপডেট হওয়া বন্ধ করতে পারে। এটা ঠিক আছে, শুধু পৃষ্ঠাটি পুনরায় লোড করুন। ঠিক একইভাবে, আমরা আরেকটি নোড যোগ করি এবং ফলস্বরূপ আমরা 3টি কার্যকরী নোডের একটি পূর্ণাঙ্গ ক্লাস্টার পাই।

এখন আমরা একটি GUI থেকে সমস্ত ক্লাস্টার নোড নিয়ন্ত্রণ করতে পারি।

উচ্চ প্রাপ্যতা সংস্থা

প্রক্সমক্স আউট অফ দ্য বক্স ভার্চুয়াল মেশিন এবং LXC কন্টেইনার উভয়ের জন্য HA সংস্থার কার্যকারিতা সমর্থন করে। ইউটিলিটি হ্যা-ম্যানেজার ত্রুটি এবং ব্যর্থতা সনাক্ত করে এবং পরিচালনা করে, একটি ব্যর্থ নোড থেকে একটি কার্যকরী নোডের ব্যর্থতা সম্পাদন করে। প্রক্রিয়াটি সঠিকভাবে কাজ করার জন্য, ভার্চুয়াল মেশিন এবং পাত্রে একটি সাধারণ ফাইল স্টোরেজ থাকা প্রয়োজন।

উচ্চ প্রাপ্যতা কার্যকারিতা সক্রিয় করার পরে, ha-manager সফ্টওয়্যার স্ট্যাক ক্রমাগত ভার্চুয়াল মেশিন বা কন্টেইনারের অবস্থা নিরীক্ষণ করবে এবং অন্যান্য ক্লাস্টার নোডের সাথে অ্যাসিঙ্ক্রোনাসভাবে ইন্টারঅ্যাক্ট করবে।

শেয়ার্ড স্টোরেজ সংযুক্ত করা হচ্ছে

উদাহরণ হিসাবে, আমরা 192.168.88.18 এ একটি ছোট NFS ফাইল শেয়ার স্থাপন করেছি। ক্লাস্টারের সমস্ত নোডগুলি এটি ব্যবহার করতে সক্ষম হওয়ার জন্য, আপনাকে নিম্নলিখিত ম্যানিপুলেশনগুলি করতে হবে।

ওয়েব ইন্টারফেস মেনু থেকে নির্বাচন করুন ডেটাসেন্টার - স্টোরেজ - অ্যাড - এনএফএস.

ক্ষেত্রগুলি পূরণ করুন ID и সার্ভার. ড্রপ ডাউন তালিকায় রপ্তানি উপলব্ধ এবং তালিকা থেকে পছন্দসই ডিরেক্টরি নির্বাচন করুন সন্তুষ্ট - প্রয়োজনীয় ডেটা প্রকার। বোতাম টিপানোর পর বিজ্ঞাপন স্টোরেজ সমস্ত ক্লাস্টার নোডের সাথে সংযুক্ত হবে।

যে কোনো নোডে ভার্চুয়াল মেশিন এবং কন্টেইনার তৈরি করার সময়, আমরা আমাদের নির্দিষ্ট করি স্টোরেজ স্টোরেজ হিসাবে।

HA সেট আপ করা হচ্ছে

উদাহরণস্বরূপ, আসুন উবুন্টু 18.04 দিয়ে একটি ধারক তৈরি করি এবং এটির জন্য উচ্চ উপলব্ধতা কনফিগার করি। ধারক তৈরি এবং চালানোর পরে, বিভাগে যান ডেটাসেন্টার-এইচএ-অ্যাড. যে ক্ষেত্রটি খোলে, সেখানে ভার্চুয়াল মেশিন/কন্টেইনার আইডি এবং নোডগুলির মধ্যে রিস্টার্ট এবং সরানোর সর্বাধিক সংখ্যক প্রচেষ্টা নির্দিষ্ট করুন।

এই সংখ্যা অতিক্রম করা হলে, হাইপারভাইজার VM কে ব্যর্থ হিসাবে চিহ্নিত করবে এবং এটিকে Error অবস্থায় রাখবে, এর পরে এটি এর সাথে কোনো কাজ করা বন্ধ করবে।

বোতাম টিপানোর পরে বিজ্ঞাপন উপযোগ হ্যা-ম্যানেজার ক্লাস্টারের সমস্ত নোডকে অবহিত করবে যে এখন নির্দিষ্ট আইডি সহ VM নিয়ন্ত্রণ করা হয়েছে এবং ক্র্যাশের ক্ষেত্রে এটি অন্য নোডে পুনরায় চালু করতে হবে।

এর একটি ক্র্যাশ করা যাক

সুইচিং মেকানিজম ঠিক কিভাবে কাজ করে তা দেখতে, আসুন node1 এর পাওয়ার সাপ্লাই অস্বাভাবিকভাবে বন্ধ করি। ক্লাস্টারের সাথে কী ঘটছে তা আমরা অন্য নোড থেকে দেখি। আমরা দেখতে পাই যে সিস্টেমটি একটি ব্যর্থতা সংশোধন করেছে।

HA প্রক্রিয়ার অপারেশন মানে VM এর ধারাবাহিকতা নয়। নোড "পতন" হওয়ার সাথে সাথে VM অপারেশন সাময়িকভাবে বন্ধ হয়ে যায় যতক্ষণ না এটি স্বয়ংক্রিয়ভাবে অন্য নোডে পুনরায় চালু হয়।

এবং এখানেই "জাদু" শুরু হয় - ক্লাস্টারটি স্বয়ংক্রিয়ভাবে আমাদের VM চালানোর জন্য নোডটিকে পুনরায় বরাদ্দ করে এবং 120 সেকেন্ডের মধ্যে কাজটি স্বয়ংক্রিয়ভাবে পুনরুদ্ধার করা হয়।

আমরা পুষ্টির উপর node2 নিভিয়ে ফেলি। আসুন দেখি ক্লাস্টারটি টিকে থাকবে কিনা এবং VM স্বয়ংক্রিয়ভাবে একটি কার্যকরী অবস্থায় ফিরে আসবে কিনা।

হায়, আমরা দেখতে পাচ্ছি, আমাদের একটি সমস্যা আছে যে একমাত্র বেঁচে থাকা নোডে আর একটি কোরাম নেই, যা স্বয়ংক্রিয়ভাবে HA অক্ষম করে। আমরা কনসোলে একটি কোরাম ইনস্টল করতে বাধ্য করার জন্য কমান্ড দিই।

pvecm expected 1

2 মিনিটের পরে, HA প্রক্রিয়া সঠিকভাবে কাজ করেছে এবং, node2 খুঁজে না পেয়ে, node3 এ আমাদের VM চালু করেছে।

যত তাড়াতাড়ি আমরা node1 এবং node2 আবার চালু করেছি, ক্লাস্টারটি সম্পূর্ণরূপে পুনরুদ্ধার করা হয়েছিল। অনুগ্রহ করে মনে রাখবেন যে VM নিজে থেকে node1 এ ফিরে যায় না, তবে এটি ম্যানুয়ালি করা যেতে পারে।

বুদ্ধিমান

প্রক্সমক্স ক্লাস্টারিং মেকানিজম কীভাবে কাজ করে সে সম্পর্কে আমরা আপনাকে বলেছি এবং ভার্চুয়াল মেশিন এবং কন্টেইনারগুলির জন্য HA কীভাবে কনফিগার করা হয় তাও আপনাকে দেখিয়েছি। ক্লাস্টারিং এবং HA এর সঠিক ব্যবহার অবকাঠামোর নির্ভরযোগ্যতা বৃদ্ধি করে, সেইসাথে দুর্যোগ পুনরুদ্ধার প্রদান করে।

একটি ক্লাস্টার তৈরি করার আগে, আপনাকে অবিলম্বে পরিকল্পনা করতে হবে যে এটি কোন উদ্দেশ্যে ব্যবহার করা হবে এবং ভবিষ্যতে এটি কতটা স্কেল করা দরকার। ন্যূনতম বিলম্বের সাথে কাজ করার প্রস্তুতির জন্য আপনাকে নেটওয়ার্ক পরিকাঠামোও পরীক্ষা করতে হবে যাতে ভবিষ্যতের ক্লাস্টার ব্যর্থতা ছাড়াই কাজ করে।

আমাদের বলুন - আপনি কি Proxmox এর ক্লাস্টারিং ক্ষমতা ব্যবহার করছেন? আমরা মন্তব্যে আপনার জন্য অপেক্ষা করছি.

Proxmox VE হাইপারভাইজারের পূর্ববর্তী নিবন্ধগুলি:

• ভার্চুয়ালাইজেশনের জাদু: প্রক্সমক্স ভিই-তে একটি প্রাথমিক কোর্স
• Proxmox VE-তে ব্যাকআপ সম্পর্কে

উত্স: www.habr.com