🥇 হাত ছাড়া অ্যাডমিন = হাইপারকনভারজেন্স?

এটি একটি পৌরাণিক কাহিনী যা সার্ভার হার্ডওয়্যারের ক্ষেত্রে বেশ সাধারণ। অনুশীলনে, হাইপারকনভার্জড সমাধান (যখন সবকিছু এক হয়) অনেক কিছুর জন্য প্রয়োজন। ঐতিহাসিকভাবে, প্রথম আর্কিটেকচারগুলি আমাজন এবং গুগল তাদের পরিষেবার জন্য তৈরি করেছিল। তারপরে ধারণাটি ছিল অভিন্ন নোডগুলি থেকে একটি কম্পিউটিং ফার্ম তৈরি করা, যার প্রত্যেকটির নিজস্ব ডিস্ক ছিল। এই সমস্ত কিছু সিস্টেম-ফর্মিং সফ্টওয়্যার (হাইপারভাইজার) দ্বারা একত্রিত হয়েছিল এবং ভার্চুয়াল মেশিনে বিভক্ত হয়েছিল। মূল লক্ষ্য হল একটি নোড সার্ভিসিং করার জন্য ন্যূনতম প্রচেষ্টা এবং স্কেলিং করার সময় ন্যূনতম সমস্যা: শুধু একই সার্ভারের আরও হাজার বা দুটি কিনুন এবং তাদের কাছাকাছি সংযোগ করুন। অনুশীলনে, এগুলি বিচ্ছিন্ন কেস, এবং আরও প্রায়শই আমরা অল্প সংখ্যক নোড এবং কিছুটা আলাদা আর্কিটেকচারের কথা বলছি।

কিন্তু প্লাস একই থাকে - স্কেলিং এবং পরিচালনার অবিশ্বাস্য সহজ। নেতিবাচক দিক হল যে বিভিন্ন কাজ বিভিন্নভাবে সম্পদ ব্যবহার করে, এবং কিছু জায়গায় প্রচুর স্থানীয় ডিস্ক থাকবে, অন্যগুলিতে সামান্য RAM থাকবে, এবং তাই, অর্থাৎ, বিভিন্ন ধরণের কাজের জন্য, সম্পদের ব্যবহার হ্রাস পাবে।

দেখা যাচ্ছে যে আপনি সেটআপের সুবিধার জন্য 10-15% বেশি অর্থ প্রদান করেন। এটিই শিরোনামে মিথের জন্ম দিয়েছে। প্রযুক্তিটি কোথায় সর্বোত্তমভাবে প্রয়োগ করা হবে তা খুঁজতে আমরা দীর্ঘ সময় ব্যয় করেছি এবং আমরা এটি পেয়েছি। আসল বিষয়টি হ'ল সিস্কোর নিজস্ব স্টোরেজ সিস্টেম ছিল না, তবে তারা একটি সম্পূর্ণ সার্ভার বাজার চেয়েছিল। এবং তারা সিসকো হাইপারফ্লেক্স তৈরি করেছে - নোডগুলিতে স্থানীয় স্টোরেজ সহ একটি সমাধান।

এবং এটি হঠাৎ করেই ব্যাকআপ ডেটা সেন্টারের (ডিজাস্টার রিকভারি) জন্য একটি খুব ভাল সমাধান হয়ে উঠেছে। আমি এখনই বলব কেন এবং কিভাবে। এবং আমি আপনাকে ক্লাস্টার পরীক্ষা দেখাব।

যেখানে প্রয়োজন

হাইপারকনভারজেন্স হল:

গণনা নোডগুলিতে ডিস্ক স্থানান্তর করা হচ্ছে।
ভার্চুয়ালাইজেশন সাবসিস্টেমের সাথে স্টোরেজ সাবসিস্টেমের সম্পূর্ণ ইন্টিগ্রেশন।
নেটওয়ার্ক সাবসিস্টেমের সাথে স্থানান্তর/একীকরণ।

এই সংমিশ্রণটি আপনাকে ভার্চুয়ালাইজেশন স্তরে এবং সমস্ত একটি নিয়ন্ত্রণ উইন্ডো থেকে অনেকগুলি স্টোরেজ সিস্টেম বৈশিষ্ট্য বাস্তবায়ন করতে দেয়।

আমাদের কোম্পানীতে, অপ্রয়োজনীয় ডেটা সেন্টার ডিজাইন করার প্রকল্পগুলির প্রচুর চাহিদা রয়েছে এবং বাক্সের বাইরে একগুচ্ছ প্রতিলিপি বিকল্পগুলির (একটি মেট্রোক্লাস্টার পর্যন্ত) কারণে একটি হাইপারকনভার্জড সমাধান প্রায়শই বেছে নেওয়া হয়।

ব্যাকআপ ডেটা সেন্টারের ক্ষেত্রে, আমরা সাধারণত শহরের অন্য প্রান্তে বা অন্য শহরে একটি দূরবর্তী সুবিধা সম্পর্কে কথা বলি। এটি আপনাকে প্রধান ডেটা সেন্টারের আংশিক বা সম্পূর্ণ ব্যর্থতার ক্ষেত্রে সমালোচনামূলক সিস্টেমগুলি পুনরুদ্ধার করতে দেয়। বিক্রয় ডেটা ক্রমাগত সেখানে প্রতিলিপি করা হয়, এবং এই প্রতিলিপি অ্যাপ্লিকেশন স্তরে বা ব্লক ডিভাইস (স্টোরেজ) স্তরে হতে পারে।

অতএব, এখন আমি সিস্টেম ডিজাইন এবং পরীক্ষা সম্পর্কে কথা বলব, এবং তারপরে সঞ্চয় ডেটা সহ বাস্তব-জীবনের কয়েকটি অ্যাপ্লিকেশন পরিস্থিতি সম্পর্কে কথা বলব।

পরীক্ষা

আমাদের উদাহরণে চারটি সার্ভার রয়েছে, যার প্রতিটিতে 10 GB এর 960টি SSD ড্রাইভ রয়েছে। ক্যাশে লেখার ক্রিয়াকলাপ এবং পরিষেবা ভার্চুয়াল মেশিন সংরক্ষণের জন্য একটি উত্সর্গীকৃত ডিস্ক রয়েছে। সমাধান নিজেই চতুর্থ সংস্করণ। প্রথমটি খোলাখুলিভাবে অপরিশোধিত (পর্যালোচনা দ্বারা বিচার করা), দ্বিতীয়টি স্যাঁতসেঁতে, তৃতীয়টি ইতিমধ্যেই বেশ স্থিতিশীল, এবং এটিকে সাধারণ জনগণের জন্য বিটা পরীক্ষা শেষ হওয়ার পরে মুক্তি বলা যেতে পারে। পরীক্ষার সময় আমি কোন সমস্যা দেখিনি, সবকিছু ঘড়ির মতো কাজ করে।

পরিবর্তন v4একগুচ্ছ বাগ সংশোধন করা হয়েছে।

প্রাথমিকভাবে, প্ল্যাটফর্মটি শুধুমাত্র VMware ESXi হাইপারভাইজারের সাথে কাজ করতে পারে এবং অল্প সংখ্যক নোড সমর্থন করে। এছাড়াও, স্থাপনার প্রক্রিয়াটি সর্বদা সফলভাবে শেষ হয় নি, কিছু পদক্ষেপ পুনরায় চালু করতে হয়েছিল, পুরানো সংস্করণগুলি থেকে আপডেট করার ক্ষেত্রে সমস্যা ছিল, জিইউআই-তে ডেটা সর্বদা সঠিকভাবে প্রদর্শিত হয় না (যদিও আমি এখনও পারফরম্যান্স গ্রাফ প্রদর্শনের সাথে খুশি নই। ), মাঝে মাঝে ভার্চুয়ালাইজেশনের সাথে ইন্টারফেসে সমস্যা দেখা দেয়।

এখন সমস্ত শৈশব সমস্যা সংশোধন করা হয়েছে, HyperFlex ESXi এবং Hyper-V উভয়ই পরিচালনা করতে পারে, এছাড়াও এটি সম্ভব:

একটি প্রসারিত ক্লাস্টার তৈরি করা হচ্ছে।
ফ্যাব্রিক ইন্টারকানেক্ট ব্যবহার না করে অফিসের জন্য একটি ক্লাস্টার তৈরি করা, দুই থেকে চারটি নোড থেকে (আমরা শুধুমাত্র সার্ভার কিনি)।
বাহ্যিক স্টোরেজ সিস্টেমের সাথে কাজ করার ক্ষমতা।
পাত্রে এবং Kubernetes জন্য সমর্থন.
প্রাপ্যতা জোন তৈরি করা।
বিল্ট-ইন কার্যকারিতা সন্তোষজনক না হলে VMware SRM-এর সাথে ইন্টিগ্রেশন।

স্থাপত্যটি তার প্রধান প্রতিযোগীদের সমাধান থেকে খুব বেশি আলাদা নয়; তারা একটি সাইকেল তৈরি করেনি। এটি সব VMware বা হাইপার-ভি ভার্চুয়ালাইজেশন প্ল্যাটফর্মে চলে। হার্ডওয়্যারটি মালিকানাধীন Cisco UCS সার্ভারে হোস্ট করা হয়। সেখানে যারা প্রাথমিক সেটআপের আপেক্ষিক জটিলতা, প্রচুর বোতাম, টেমপ্লেট এবং নির্ভরতার একটি অ-তুচ্ছ সিস্টেমের জন্য প্ল্যাটফর্মটিকে ঘৃণা করেন, তবে এমনও আছেন যারা জেন শিখেছেন, ধারণা দ্বারা অনুপ্রাণিত হয়েছেন এবং আর চান না অন্যান্য সার্ভারের সাথে কাজ করতে।

আমরা ভিএমওয়্যারের সমাধান বিবেচনা করব, যেহেতু সমাধানটি মূলত এটির জন্য তৈরি করা হয়েছিল এবং আরও কার্যকারিতা রয়েছে; প্রতিযোগীদের সাথে তাল মিলিয়ে চলার জন্য এবং বাজারের প্রত্যাশা পূরণ করার জন্য হাইপার-ভি যোগ করা হয়েছিল।

ডিস্কে পূর্ণ সার্ভারের একটি ক্লাস্টার রয়েছে। ডেটা স্টোরেজের জন্য ডিস্ক রয়েছে (এসএসডি বা এইচডিডি - আপনার স্বাদ এবং প্রয়োজন অনুসারে), ক্যাশে করার জন্য একটি এসএসডি ডিস্ক রয়েছে। ডেটাস্টোরে ডেটা লেখার সময়, ডেটা ক্যাশিং স্তরে (ডেডিকেটেড এসএসডি ডিস্ক এবং ভিএম পরিষেবার র‌্যাম) সংরক্ষণ করা হয়। সমান্তরালভাবে, ক্লাস্টারের নোডগুলিতে ডেটার একটি ব্লক পাঠানো হয় (নোডের সংখ্যা ক্লাস্টার প্রতিলিপি ফ্যাক্টরের উপর নির্ভর করে)। সফল রেকর্ডিং সম্পর্কে সমস্ত নোড থেকে নিশ্চিতকরণের পরে, রেকর্ডিংয়ের নিশ্চিতকরণ হাইপারভাইজারে এবং তারপরে VM-এ পাঠানো হয়। রেকর্ড করা ডেটা পটভূমিতে স্টোরেজ ডিস্কে অনুলিপি, সংকুচিত এবং লেখা হয়। একই সময়ে, একটি বড় ব্লক সর্বদা স্টোরেজ ডিস্কগুলিতে এবং ক্রমানুসারে লেখা হয়, যা স্টোরেজ ডিস্কের লোড হ্রাস করে।

ডিডুপ্লিকেশন এবং কম্প্রেশন সর্বদা সক্রিয় থাকে এবং অক্ষম করা যায় না। ডেটা স্টোরেজ ডিস্ক থেকে বা RAM ক্যাশে থেকে সরাসরি পড়া হয়। যদি একটি হাইব্রিড কনফিগারেশন ব্যবহার করা হয়, রিডগুলিও SSD-তে ক্যাশে করা হয়।

ডেটা ভার্চুয়াল মেশিনের বর্তমান অবস্থানের সাথে আবদ্ধ নয় এবং নোডগুলির মধ্যে সমানভাবে বিতরণ করা হয়। এই পদ্ধতিটি আপনাকে সমস্ত ডিস্ক এবং নেটওয়ার্ক ইন্টারফেস সমানভাবে লোড করতে দেয়। একটি সুস্পষ্ট অসুবিধা রয়েছে: আমরা যতটা সম্ভব পড়ার লেটেন্সি কমাতে পারি না, যেহেতু স্থানীয়ভাবে ডেটা উপলব্ধতার কোনও গ্যারান্টি নেই৷ তবে আমি বিশ্বাস করি যে প্রাপ্ত সুবিধার তুলনায় এটি একটি গৌণ ত্যাগ। তদুপরি, নেটওয়ার্ক বিলম্বগুলি এমন মানগুলিতে পৌঁছেছে যে তারা কার্যত সামগ্রিক ফলাফলকে প্রভাবিত করে না।

একটি বিশেষ পরিষেবা ভিএম সিসকো হাইপারফ্লেক্স ডেটা প্ল্যাটফর্ম কন্ট্রোলার, যা প্রতিটি স্টোরেজ নোডে তৈরি করা হয়, ডিস্ক সাবসিস্টেমের সম্পূর্ণ অপারেশন লজিকের জন্য দায়ী। আমাদের পরিষেবা VM কনফিগারেশনে, আটটি vCPU এবং 72 GB RAM বরাদ্দ করা হয়েছিল, যা খুব কম নয়। আমি আপনাকে মনে করিয়ে দিচ্ছি যে হোস্টেরই 28টি শারীরিক কোর এবং 512 জিবি RAM রয়েছে।

সেবা VM-এর সরাসরি SAS কন্ট্রোলারকে VM-এ ফরোয়ার্ড করে ফিজিক্যাল ডিস্কে অ্যাক্সেস রয়েছে। হাইপারভাইজারের সাথে যোগাযোগ একটি বিশেষ মডিউল IOVisor এর মাধ্যমে ঘটে, যা I/O ক্রিয়াকলাপকে বাধা দেয় এবং এমন একটি এজেন্ট ব্যবহার করে যা আপনাকে হাইপারভাইজার API এ কমান্ড পাঠাতে দেয়। হাইপারফ্লেক্স স্ন্যাপশট এবং ক্লোনগুলির সাথে কাজ করার জন্য এজেন্ট দায়ী৷

ডিস্ক সংস্থানগুলি হাইপারভাইজারে NFS বা SMB শেয়ার হিসাবে মাউন্ট করা হয় (হাইপারভাইজারের ধরণের উপর নির্ভর করে, অনুমান করুন কোনটি কোথায়)। এবং হুডের নীচে, এটি একটি বিতরণ করা ফাইল সিস্টেম যা আপনাকে প্রাপ্তবয়স্ক পূর্ণাঙ্গ স্টোরেজ সিস্টেমের বৈশিষ্ট্যগুলি যোগ করতে দেয়: পাতলা ভলিউম বরাদ্দকরণ, কম্প্রেশন এবং ডিডপ্লিকেশন, রিডাইরেক্ট-অন-রাইট প্রযুক্তি ব্যবহার করে স্ন্যাপশট, সিঙ্ক্রোনাস/অসিঙ্ক্রোনাস প্রতিলিপি।

সার্ভিস VM হাইপারফ্লেক্স সাবসিস্টেমের WEB ম্যানেজমেন্ট ইন্টারফেসে অ্যাক্সেস প্রদান করে। vCenter-এর সাথে ইন্টিগ্রেশন আছে, এবং বেশিরভাগ দৈনন্দিন কাজগুলি এটি থেকে সঞ্চালিত করা যেতে পারে, তবে ডেটাস্টোরগুলি, উদাহরণস্বরূপ, যদি আপনি ইতিমধ্যে একটি দ্রুত HTML5 ইন্টারফেসে স্যুইচ করে থাকেন বা একটি সম্পূর্ণ ফ্ল্যাশ ক্লায়েন্ট ব্যবহার করেন তবে একটি পৃথক ওয়েবক্যাম থেকে কাটাতে আরও সুবিধাজনক। সম্পূর্ণ একীকরণ সহ। পরিষেবা ওয়েবক্যামে আপনি সিস্টেমের কর্মক্ষমতা এবং বিস্তারিত স্থিতি দেখতে পারেন।

একটি ক্লাস্টারে আরেকটি নোড আছে - কম্পিউটিং নোড। এগুলি বিল্ট-ইন ডিস্ক ছাড়াই র্যাক বা ব্লেড সার্ভার হতে পারে। এই সার্ভারগুলি VM চালাতে পারে যার ডেটা ডিস্ক সহ সার্ভারগুলিতে সংরক্ষণ করা হয়। ডেটা অ্যাক্সেসের দৃষ্টিকোণ থেকে, নোডের প্রকারের মধ্যে কোনও পার্থক্য নেই, কারণ আর্কিটেকচারে ডেটার শারীরিক অবস্থান থেকে বিমূর্ততা জড়িত। কম্পিউটিং নোড এবং স্টোরেজ নোডের সর্বাধিক অনুপাত হল 2:1।

ক্লাস্টার রিসোর্স স্কেলিং করার সময় কম্পিউট নোড ব্যবহার করা নমনীয়তা বাড়ায়: আমাদের শুধুমাত্র CPU/RAM এর প্রয়োজন হলে আমাদের ডিস্ক সহ অতিরিক্ত নোড কিনতে হবে না। উপরন্তু, আমরা একটি ব্লেড খাঁচা যোগ করতে পারি এবং সার্ভারের র্যাক প্লেসমেন্টে সংরক্ষণ করতে পারি।

ফলস্বরূপ, আমাদের নিম্নলিখিত বৈশিষ্ট্য সহ একটি হাইপারকনভার্জড প্ল্যাটফর্ম রয়েছে:

একটি ক্লাস্টারে 64 নোড পর্যন্ত (32 স্টোরেজ নোড পর্যন্ত)।
একটি ক্লাস্টারে নোডের সর্বনিম্ন সংখ্যা তিনটি (একটি এজ ক্লাস্টারের জন্য দুটি)।
ডেটা রিডানডেন্সি মেকানিজম: প্রতিলিপি ফ্যাক্টর 2 এবং 3 সহ মিররিং।
মেট্রো ক্লাস্টার।
অন্য হাইপারফ্লেক্স ক্লাস্টারে অ্যাসিঙ্ক্রোনাস VM প্রতিলিপি।
দূরবর্তী ডেটা সেন্টারে VM স্যুইচ করার অর্কেস্ট্রেশন।
রিডাইরেক্ট-অন-রাইট প্রযুক্তি ব্যবহার করে নেটিভ স্ন্যাপশট।
প্রতিলিপি ফ্যাক্টর 1 এ ব্যবহারযোগ্য স্থানের 3 পিবি পর্যন্ত এবং অনুলিপি ছাড়াই। আমরা প্রতিলিপিকরণ ফ্যাক্টর 2 বিবেচনা করি না, কারণ এটি গুরুতর বিক্রয়ের জন্য একটি বিকল্প নয়।

আরেকটি বিশাল প্লাস হল ব্যবস্থাপনা এবং স্থাপনার সহজলভ্যতা। UCS সার্ভার স্থাপনের সমস্ত জটিলতা সিসকো ইঞ্জিনিয়ারদের দ্বারা প্রস্তুত একটি বিশেষ VM দ্বারা যত্ন নেওয়া হয়।

টেস্ট বেঞ্চ কনফিগারেশন:

2 x Cisco UCS Fabric Interconnect 6248UP একটি ম্যানেজমেন্ট ক্লাস্টার এবং নেটওয়ার্ক উপাদান হিসাবে (48 পোর্ট ইথারনেট 10G/FC 16G মোডে কাজ করে)।
চারটি Cisco UCS HXAF240 M4 সার্ভার।

সার্ভার বৈশিষ্ট্য:

সিপিইউ

2 x Intel® Xeon® E5-2690 v4

র্যাম

16 x 32GB DDR4-2400-MHz RDIMM/PC4-19200/ডুয়াল র‍্যাঙ্ক/x4/1.2v

নেটওয়ার্ক

UCSC-MLOM-CSC-02 (VIC 1227)। 2 10G ইথারনেট পোর্ট

স্টোরেজ HBA

Cisco 12G মডুলার SAS কন্ট্রোলারের মাধ্যমে পাস

স্টোরেজ ডিস্ক

1 x SSD Intel S3520 120 GB, 1 x SSD Samsung MZ-IES800D, 10 x SSD Samsung PM863a 960 GB

আরও কনফিগারেশন বিকল্পনির্বাচিত হার্ডওয়্যার ছাড়াও, নিম্নলিখিত বিকল্পগুলি বর্তমানে উপলব্ধ:

HXAF240c M5।
Intel Silver 4110 থেকে Intel Platinum I8260Y পর্যন্ত এক বা দুটি CPU। দ্বিতীয় প্রজন্ম উপলব্ধ।
24 মেমরি স্লট, 16 GB RDIMM 2600 থেকে 128 GB LRDIMM 2933 পর্যন্ত স্ট্রিপ।
6 থেকে 23 ডেটা ডিস্ক, একটি ক্যাশিং ডিস্ক, একটি সিস্টেম ডিস্ক এবং একটি বুট ডিস্ক।

ক্ষমতা ড্রাইভ

HX-SD960G61X-EV 960GB 2.5 ইঞ্চি এন্টারপ্রাইজ মান 6G SATA SSD (1X সহনশীলতা) SAS 960 GB।
HX-SD38T61X-EV 3.8TB 2.5 ইঞ্চি এন্টারপ্রাইজ মান 6G SATA SSD (1X সহনশীলতা) SAS 3.8 TB।
ক্যাশিং ড্রাইভ
HX-NVMEXPB-I375 375GB 2.5 ইঞ্চি Intel Optane Drive, Extreme Perf & Endurance.
HX-NVMEHW-H1600* 1.6TB 2.5 ইঞ্চি Ent। পারফ NVMe SSD (3X সহনশীলতা) NVMe 1.6 TB।
HX-SD400G12TX-EP 400GB 2.5 ইঞ্চি Ent. পারফ 12G SAS SSD (10X সহনশীলতা) SAS 400 GB।
HX-SD800GBENK9** 800GB 2.5 ইঞ্চি Ent। পারফ 12G SAS SED SSD (10X সহনশীলতা) SAS 800 GB।
HX-SD16T123X-EP 1.6TB 2.5 ইঞ্চি এন্টারপ্রাইজ পারফরম্যান্স 12G SAS SSD (3X সহনশীলতা)।

সিস্টেম/লগ ড্রাইভ

HX-SD240GM1X-EV 240GB 2.5 ইঞ্চি এন্টারপ্রাইজ মান 6G SATA SSD (আপগ্রেড প্রয়োজন)।

বুট ড্রাইভ

HX-M2-240GB 240GB SATA M.2 SSD SATA 240 GB।

40G, 25G বা 10G ইথারনেট পোর্টের মাধ্যমে নেটওয়ার্কের সাথে সংযোগ করুন৷

FI HX-FI-6332 (40G), HX-FI-6332-16UP (40G), HX-FI-6454 (40G/100G) হতে পারে।

পরীক্ষা নিজেই

ডিস্ক সাবসিস্টেম পরীক্ষা করতে, আমি HCIBench 2.2.1 ব্যবহার করেছি। এটি একটি বিনামূল্যের ইউটিলিটি যা আপনাকে একাধিক ভার্চুয়াল মেশিন থেকে একটি লোড তৈরি স্বয়ংক্রিয় করতে দেয়। লোড নিজেই স্বাভাবিক fio দ্বারা উত্পন্ন হয়.

আমাদের ক্লাস্টারে চারটি নোড রয়েছে, রেপ্লিকেশন ফ্যাক্টর 3, সমস্ত ডিস্ক ফ্ল্যাশ।

পরীক্ষার জন্য, আমি চারটি ডেটাস্টোর এবং আটটি ভার্চুয়াল মেশিন তৈরি করেছি। লিখিত পরীক্ষার জন্য, ক্যাশিং ডিস্ক পূর্ণ নয় বলে ধরে নেওয়া হয়।

পরীক্ষার ফলাফল নিম্নরূপ:

100% পড়ুন 100% এলোমেলো

0% পড়ুন 100% এলোমেলো

ব্লক/সারি গভীরতা

128

256

512

1024

2048

128

256

512

1024

2048

0,59 ms 213804 IOPS

0,84 ms 303540 IOPS

1,36ms 374348 IOPS

2.47 ms 414116 IOPS

4,86ms 420180 IOPS

2,22 ms 57408 IOPS

3,09 ms 82744 IOPS

5,02 ms 101824 IPOS

8,75 ms 116912 IOPS

17,2 ms 118592 IOPS

0,67 ms 188416 IOPS

0,93 ms 273280 IOPS

1,7 ms 299932 IOPS

2,72 ms 376,484 IOPS

5,47 ms 373,176 IOPS

3,1 ms 41148 IOPS

4,7 ms 54396 IOPS

7,09 ms 72192 IOPS

12,77 ms 80132 IOPS

16K

0,77 ms 164116 IOPS

1,12 ms 228328 IOPS

1,9 ms 268140 IOPS

3,96 ms 258480 IOPS

3,8 ms 33640 IOPS

6,97 ms 36696 IOPS

11,35 ms 45060 IOPS

32K

1,07 ms 119292 IOPS

1,79 ms 142888 IOPS

3,56 ms 143760 IOPS

7,17 ms 17810 IOPS

11,96 ms 21396 IOPS

64K

1,84 ms 69440 IOPS

3,6 ms 71008 IOPS

7,26 ms 70404 IOPS

11,37 ms 11248 IOPS

বোল্ড মানগুলি নির্দেশ করে যার পরে উত্পাদনশীলতা বৃদ্ধি পায় না, কখনও কখনও এমনকি অবনতিও দৃশ্যমান হয়। এটি এই কারণে যে আমরা নেটওয়ার্ক/কন্ট্রোলার/ডিস্কের কর্মক্ষমতা দ্বারা সীমাবদ্ধ।

অনুক্রমিক রিড 4432 MB/s।
অনুক্রমিক লিখুন 804 MB/s।
যদি একটি কন্ট্রোলার ব্যর্থ হয় (ভার্চুয়াল মেশিন বা হোস্টের ব্যর্থতা), কর্মক্ষমতা ড্রপ দ্বিগুণ হয়।
স্টোরেজ ডিস্ক ব্যর্থ হলে, ড্রডাউন হয় 1/3। ডিস্ক পুনর্নির্মাণ প্রতিটি নিয়ামকের সম্পদের 5% নেয়।

একটি ছোট ব্লকে, আমরা কন্ট্রোলার (ভার্চুয়াল মেশিন) এর কর্মক্ষমতা দ্বারা সীমাবদ্ধ, এর CPU 100% এ লোড হয় এবং যখন ব্লক বৃদ্ধি পায়, আমরা পোর্ট ব্যান্ডউইথ দ্বারা সীমাবদ্ধ। অলফ্ল্যাশ সিস্টেমের সম্ভাব্যতা আনলক করার জন্য 10 Gbps যথেষ্ট নয়। দুর্ভাগ্যবশত, প্রদত্ত ডেমো স্ট্যান্ডের প্যারামিটারগুলি আমাদের 40 Gbit/s-এ অপারেশন পরীক্ষা করার অনুমতি দেয় না।

পরীক্ষা এবং আর্কিটেকচার অধ্যয়ন থেকে আমার ধারণায়, অ্যালগরিদমের কারণে যে সমস্ত হোস্টের মধ্যে ডেটা রাখে, আমরা পরিমাপযোগ্য, অনুমানযোগ্য কর্মক্ষমতা পাই, কিন্তু পড়ার সময় এটি একটি সীমাবদ্ধতাও বটে, কারণ এটি স্থানীয় ডিস্ক থেকে আরও বেশি চেপে ফেলা সম্ভব হবে, এখানে এটি একটি আরও উত্পাদনশীল নেটওয়ার্ক সংরক্ষণ করতে পারে, উদাহরণস্বরূপ, 40 Gbit/s এ FI উপলব্ধ।

এছাড়াও, ক্যাশিং এবং ডিডপ্লিকেশনের জন্য একটি ডিস্ক একটি সীমাবদ্ধতা হতে পারে; আসলে, এই টেস্টবেডে আমরা চারটি SSD ডিস্কে লিখতে পারি। ক্যাশিং ড্রাইভের সংখ্যা বাড়াতে এবং পার্থক্য দেখতে সক্ষম হওয়া দুর্দান্ত হবে।

বাস্তব ব্যবহার

একটি ব্যাকআপ ডেটা সেন্টার সংগঠিত করতে, আপনি দুটি পন্থা ব্যবহার করতে পারেন (আমরা একটি দূরবর্তী সাইটে ব্যাকআপ রাখার বিষয়টি বিবেচনা করি না):

সক্রিয় প্যাসিভ. সমস্ত অ্যাপ্লিকেশন প্রধান ডেটা সেন্টারে হোস্ট করা হয়। প্রতিলিপি সিঙ্ক্রোনাস বা অ্যাসিঙ্ক্রোনাস। প্রধান ডেটা সেন্টার ব্যর্থ হলে, আমাদের ব্যাকআপ এক সক্রিয় করতে হবে। এটি ম্যানুয়ালি/স্ক্রিপ্ট/অর্কেস্ট্রেশন অ্যাপ্লিকেশনগুলি করা যেতে পারে। এখানে আমরা রেপ্লিকেশন ফ্রিকোয়েন্সির সাথে সামঞ্জস্যপূর্ণ একটি RPO পাব, এবং RTO প্রশাসকের প্রতিক্রিয়া এবং দক্ষতা এবং স্যুইচিং পরিকল্পনার উন্নয়ন/ডিবাগিংয়ের মানের উপর নির্ভর করে।
সক্রিয়-সক্রিয়। এই ক্ষেত্রে, শুধুমাত্র সিঙ্ক্রোনাস প্রতিলিপি আছে; ডেটা সেন্টারের প্রাপ্যতা তৃতীয় সাইটে কঠোরভাবে অবস্থিত একটি কোরাম/আর্বিটার দ্বারা নির্ধারিত হয়। RPO = 0, এবং RTO 0 পর্যন্ত পৌঁছাতে পারে (যদি অ্যাপ্লিকেশন অনুমতি দেয়) বা ভার্চুয়ালাইজেশন ক্লাস্টারে একটি নোডের ব্যর্থতার সময়ের সমান। ভার্চুয়ালাইজেশন স্তরে, একটি প্রসারিত (মেট্রো) ক্লাস্টার তৈরি করা হয় যার জন্য সক্রিয়-সক্রিয় স্টোরেজ প্রয়োজন।

সাধারণত আমরা দেখি যে ক্লায়েন্টরা ইতিমধ্যেই মূল ডেটা সেন্টারে একটি ক্লাসিক স্টোরেজ সিস্টেম সহ একটি আর্কিটেকচার প্রয়োগ করেছে, তাই আমরা প্রতিলিপি করার জন্য আরেকটি ডিজাইন করি। আমি যেমন উল্লেখ করেছি, সিসকো হাইপারফ্লেক্স অ্যাসিঙ্ক্রোনাস প্রতিলিপি এবং প্রসারিত ভার্চুয়ালাইজেশন ক্লাস্টার তৈরির প্রস্তাব দেয়। একই সময়ে, আমাদের দুটি স্টোরেজ সিস্টেমে ব্যয়বহুল প্রতিলিপি ফাংশন এবং সক্রিয়-সক্রিয় ডেটা অ্যাক্সেস সহ মিডরেঞ্জ স্তরের এবং উচ্চতর একটি ডেডিকেটেড স্টোরেজ সিস্টেমের প্রয়োজন নেই।

দৃশ্যকল্প 1: আমাদের একটি প্রাথমিক এবং ব্যাকআপ ডেটা সেন্টার রয়েছে, VMware vSphere-এ একটি ভার্চুয়ালাইজেশন প্ল্যাটফর্ম। সমস্ত উত্পাদনশীল সিস্টেম প্রধান ডেটা সেন্টারে অবস্থিত, এবং ভার্চুয়াল মেশিনগুলির প্রতিলিপি হাইপারভাইজার স্তরে সঞ্চালিত হয়, এটি ব্যাকআপ ডেটা সেন্টারে ভিএম চালু রাখা এড়াবে। আমরা অন্তর্নির্মিত সরঞ্জামগুলি ব্যবহার করে ডেটাবেস এবং বিশেষ অ্যাপ্লিকেশনগুলির প্রতিলিপি তৈরি করি এবং VM চালু রাখি। প্রধান ডেটা সেন্টার ব্যর্থ হলে, আমরা ব্যাকআপ ডেটা সেন্টারে সিস্টেম চালু করি। আমরা বিশ্বাস করি যে আমাদের প্রায় 100টি ভার্চুয়াল মেশিন রয়েছে। প্রাথমিক ডেটা সেন্টারটি চালু থাকাকালীন, স্ট্যান্ডবাই ডেটা সেন্টার পরীক্ষার পরিবেশ এবং অন্যান্য সিস্টেমগুলি চালাতে পারে যা প্রাথমিক ডেটা সেন্টারটি চালু হলে বন্ধ হয়ে যেতে পারে। এটাও সম্ভব যে আমরা দ্বিমুখী প্রতিলিপি ব্যবহার করি। হার্ডওয়্যারের দৃষ্টিকোণ থেকে, কিছুই পরিবর্তন হবে না।

ক্লাসিক্যাল আর্কিটেকচারের ক্ষেত্রে, আমরা প্রতিটি ডেটা সেন্টারে একটি হাইব্রিড স্টোরেজ সিস্টেম ইনস্টল করব যার মাধ্যমে FibreChannel, টায়য়ারিং, ডিডুপ্লিকেশন এবং কম্প্রেশন (কিন্তু অনলাইন নয়), প্রতিটি সাইটের জন্য 8টি সার্ভার, 2টি FibreChannel সুইচ এবং 10G ইথারনেটের মাধ্যমে অ্যাক্সেস থাকবে। একটি ক্লাসিক আর্কিটেকচারে প্রতিলিপি এবং স্যুইচিং পরিচালনার জন্য, আমরা ভিএমওয়্যার সরঞ্জাম (প্রতিলিপি + এসআরএম) বা তৃতীয় পক্ষের সরঞ্জামগুলি ব্যবহার করতে পারি, যা কিছুটা সস্তা এবং কখনও কখনও আরও সুবিধাজনক হবে।

চিত্রটি চিত্রটি দেখায়।

সিসকো হাইপারফ্লেক্স ব্যবহার করার সময়, নিম্নলিখিত আর্কিটেকচারটি পাওয়া যায়:

হাইপারফ্লেক্সের জন্য, আমি বড় CPU/RAM সম্পদ সহ সার্ভার ব্যবহার করেছি, কারণ... কিছু সম্পদ হাইপারফ্লেক্স কন্ট্রোলার ভিএম-এ যাবে; সিপিইউ এবং মেমরির পরিপ্রেক্ষিতে, আমি হাইপারফ্লেক্স কনফিগারেশনটিকে কিছুটা পুনরায় কনফিগার করেছি যাতে সিস্কোর সাথে খেলা না হয় এবং অবশিষ্ট ভিএমগুলির জন্য সংস্থানগুলির গ্যারান্টি দেয়। কিন্তু আমরা FibreChannel সুইচ ত্যাগ করতে পারি, এবং আমাদের প্রতিটি সার্ভারের জন্য ইথারনেট পোর্টের প্রয়োজন হবে না; স্থানীয় ট্র্যাফিক FI-এর মধ্যে সুইচ করা হয়।

ফলাফল প্রতিটি ডেটা সেন্টারের জন্য নিম্নলিখিত কনফিগারেশন ছিল:

সার্ভারস

8 x 1U সার্ভার (384 GB RAM, 2 x Intel Gold 6132, FC HBA)

8 x HX240C-M5L (512 GB RAM, 2 x Intel Gold 6150, 3,2 GB SSD, 10 x 6 TB NL-SAS)

SHD

FC ফ্রন্ট-এন্ড সহ হাইব্রিড স্টোরেজ সিস্টেম (20TB SSD, 130 TB NL-SAS)

ল্যান

2 x ইথারনেট সুইচ 10G 12 পোর্ট

সান

2 x FC সুইচ 32/16Gb 24 পোর্ট

2 x Cisco UCS FI 6332

লাইসেন্সের

VMware Ent Plus

VM স্যুইচিংয়ের প্রতিলিপি এবং/অথবা অর্কেস্ট্রেশন

VMware Ent Plus

আমি হাইপারফ্লেক্সের জন্য প্রতিলিপি সফ্টওয়্যার লাইসেন্স প্রদান করিনি, যেহেতু এটি আমাদের জন্য বাক্সের বাইরে উপলব্ধ।

শাস্ত্রীয় স্থাপত্যের জন্য, আমি এমন একজন বিক্রেতাকে বেছে নিয়েছি যিনি নিজেকে একটি উচ্চ-মানের এবং সস্তা প্রস্তুতকারক হিসাবে প্রতিষ্ঠিত করেছেন। উভয় বিকল্পের জন্য, আমি একটি নির্দিষ্ট সমাধানের জন্য স্ট্যান্ডার্ড ডিসকাউন্ট প্রয়োগ করেছি এবং ফলস্বরূপ আমি প্রকৃত মূল্য পেয়েছি।

সিসকো হাইপারফ্লেক্স সমাধানটি 13% সস্তায় পরিণত হয়েছে।

দৃশ্যকল্প 2: দুটি সক্রিয় ডেটা সেন্টার তৈরি করা। এই পরিস্থিতিতে, আমরা ভিএমওয়্যারে একটি প্রসারিত ক্লাস্টার ডিজাইন করছি।

ক্লাসিক আর্কিটেকচারে ভার্চুয়ালাইজেশন সার্ভার, একটি SAN (FC প্রোটোকল) এবং দুটি স্টোরেজ সিস্টেম রয়েছে যা তাদের মধ্যে প্রসারিত ভলিউম পড়তে এবং লিখতে পারে। প্রতিটি স্টোরেজ সিস্টেমে আমরা স্টোরেজের জন্য একটি দরকারী ক্ষমতা রাখি।

হাইপারফ্লেক্সে আমরা উভয় সাইটে একই সংখ্যক নোড সহ একটি স্ট্রেচ ক্লাস্টার তৈরি করি। এই ক্ষেত্রে, 2+2 এর একটি প্রতিলিপি ফ্যাক্টর ব্যবহার করা হয়।

ফলাফল হল নিম্নলিখিত কনফিগারেশন:

শাস্ত্রীয় স্থাপত্য

হাইপারফ্লেক্স

সার্ভারস

16 x 1U সার্ভার (384 GB RAM, 2 x Intel Gold 6132, FC HBA, 2 x 10G NIC)

16 x HX240C-M5L (512 GB RAM, 2 x Intel Gold 6132, 1,6 TB NVMe, 12 x 3,8 TB SSD, VIC 1387)

SHD

2 x অলফ্ল্যাশ স্টোরেজ সিস্টেম (150 TB SSD)

ল্যান

4 x ইথারনেট সুইচ 10G 24 পোর্ট

সান

4 x FC সুইচ 32/16Gb 24 পোর্ট

4 x Cisco UCS FI 6332

লাইসেন্সের

VMware Ent Plus

সমস্ত গণনায়, আমি নেটওয়ার্ক পরিকাঠামো, ডেটা সেন্টার খরচ ইত্যাদি বিবেচনা করিনি: তারা ক্লাসিক্যাল আর্কিটেকচার এবং হাইপারফ্লেক্স সমাধানের জন্য একই হবে।

খরচের পরিপ্রেক্ষিতে, হাইপারফ্লেক্স 5% বেশি ব্যয়বহুল হয়ে উঠেছে। এখানে এটি লক্ষণীয় যে CPU/RAM সংস্থানগুলির পরিপ্রেক্ষিতে আমার সিসকোর জন্য একটি তির্যক ছিল, কারণ কনফিগারেশনে আমি মেমরি কন্ট্রোলার চ্যানেলগুলি সমানভাবে পূরণ করেছি। খরচ কিছুটা বেশি, কিন্তু মাত্রার ক্রম অনুসারে নয়, যা স্পষ্টভাবে ইঙ্গিত করে যে হাইপারকনভারজেন্স অগত্যা "ধনীদের জন্য খেলনা" নয়, তবে ডেটা সেন্টার তৈরির জন্য আদর্শ পদ্ধতির সাথে প্রতিযোগিতা করতে পারে। এটি তাদের জন্যও আগ্রহী হতে পারে যাদের ইতিমধ্যেই Cisco UCS সার্ভার এবং তাদের জন্য সংশ্লিষ্ট পরিকাঠামো রয়েছে।

সুবিধার মধ্যে, আমরা SAN এবং স্টোরেজ সিস্টেম পরিচালনার জন্য খরচের অনুপস্থিতি, অনলাইন কম্প্রেশন এবং ডিডপ্লিকেশন, সমর্থনের জন্য একটি একক এন্ট্রি পয়েন্ট (ভার্চুয়ালাইজেশন, সার্ভার, তারা স্টোরেজ সিস্টেমও), স্থান সংরক্ষণ (তবে সব পরিস্থিতিতে নয়), অপারেশন সরলীকরণ।

সমর্থনের জন্য, এখানে আপনি এটি একজন বিক্রেতার কাছ থেকে পাবেন - সিসকো। সিসকো ইউসিএস সার্ভারগুলির সাথে আমার অভিজ্ঞতার বিচার করে, আমি এটি পছন্দ করি; আমাকে হাইপারফ্লেক্সে এটি খুলতে হবে না, সবকিছু একই কাজ করেছে। প্রকৌশলীরা অবিলম্বে সাড়া দেয় এবং শুধুমাত্র সাধারণ সমস্যাই নয়, জটিল প্রান্তের ক্ষেত্রেও সমাধান করতে পারে। কখনও কখনও আমি প্রশ্নগুলির সাথে তাদের দিকে ফিরে যাই: "এটি করা কি সম্ভব, এটি চালু করুন?" অথবা "আমি এখানে কিছু কনফিগার করেছি, এবং এটি কাজ করতে চায় না। সাহায্য!" - তারা ধৈর্য সহকারে সেখানে প্রয়োজনীয় নির্দেশিকা খুঁজে পাবে এবং সঠিক ক্রিয়াগুলি নির্দেশ করবে; তারা উত্তর দেবে না: "আমরা কেবল হার্ডওয়্যার সমস্যার সমাধান করি।"

রেফারেন্স

উত্স: www.habr.com

হাত ছাড়া অ্যাডমিন = হাইপারকনভারজেন্স?

যেখানে প্রয়োজন

পরীক্ষা

টেস্ট বেঞ্চ কনফিগারেশন:

পরীক্ষা নিজেই

বাস্তব ব্যবহার

রেফারেন্স

একটি মন্তব্য জুড়ুন উত্তর বাতিল