সফ্টওয়্যার-সংজ্ঞায়িত স্টোরেজ সিস্টেম নাকি ডাইনোসরদের হত্যা করেছে?

তারা একসময় খাদ্য শৃঙ্খলের শীর্ষস্থান দখল করে। হাজার বছর ধরে। এবং তারপরে অচিন্তনীয় ঘটনা ঘটেছিল: আকাশ মেঘে ঢেকে গিয়েছিল এবং তাদের অস্তিত্ব বন্ধ হয়ে গিয়েছিল। বিশ্বের অন্য প্রান্তে, এমন ঘটনা ঘটেছে যা জলবায়ু পরিবর্তন করেছে: মেঘলা বেড়েছে। ডাইনোসরগুলি খুব বড় এবং খুব ধীর হয়ে গিয়েছিল: তাদের বেঁচে থাকার প্রচেষ্টা ব্যর্থ হয়েছিল। শীর্ষ শিকারী 100 মিলিয়ন বছর ধরে পৃথিবী শাসন করেছে, বড় এবং শক্তিশালী হয়ে উঠছে। তারা খাদ্য শৃঙ্খলের শীর্ষে একটি নিখুঁত সত্তার মতো মনে হয় এমনভাবে বিবর্তিত হয়েছিল, কিন্তু মহাবিশ্ব হঠাৎ করে আমাদের গ্রহের চেহারা পরিবর্তন করে।

হাস্যকরভাবে, এটি ছিল মেঘ যা 66 মিলিয়ন বছর আগে ডাইনোসরদের নিশ্চিহ্ন করেছিল। একইভাবে, মেঘ আজ খাদ্য শৃঙ্খলের শীর্ষে ক্লাসিক্যাল ডেটা স্টোরেজ সিস্টেমগুলিকে ধ্বংস করছে। উভয় ক্ষেত্রেই, সমস্যাটি মেঘের নিজের নয়, বরং পরিবর্তনশীল বিশ্বের সাথে খাপ খাইয়ে নেওয়ার ক্ষমতা ছিল। ডাইনোসরের ক্ষেত্রে, সবকিছু দ্রুত ঘটেছিল: মেঘের ধ্বংসাত্মক প্রভাব উল্কাপাতের কয়েক দিন বা সপ্তাহের মধ্যে ঘটেছিল (বা আগ্নেয়গিরির অগ্ন্যুৎপাত - তত্ত্বের পছন্দটি আপনার)। ক্লাসিক ডেটা গুদামগুলির ক্ষেত্রে, প্রক্রিয়াটি কয়েক বছর সময় নেয়, তবে এটি অবশ্যই অপরিবর্তনীয়।

ট্রায়াসিক সময়কাল: বড় লোহার বয়স এবং পরিযায়ী অ্যাপ্লিকেশনের উত্থান

তাহলে কি হলো? বিদ্যমান ইকোসিস্টেমের মধ্যে রয়েছে এন্ট্রি-লেভেল এবং মিড-রেঞ্জ স্টোরেজ সিস্টেম, এন্টারপ্রাইজ-লেভেল সিস্টেম এবং ডাইরেক্ট অ্যাটাচড স্টোরেজ (DAS)। এই বিভাগগুলি বিশ্লেষকদের দ্বারা নির্ধারিত হয়েছিল এবং তাদের নিজস্ব বাজারের পরিমাণ, খরচ, নির্ভরযোগ্যতা, কর্মক্ষমতা এবং মাপযোগ্যতার সূচক ছিল। এবং তারপর অদ্ভুত কিছু ঘটেছে।

ভার্চুয়াল মেশিনের আবির্ভাবের অর্থ হল যে একাধিক অ্যাপ্লিকেশন একক সার্ভারে একসাথে চলতে পারে, সম্ভবত একাধিক মালিক জুড়ে- এমন একটি পরিবর্তন যা সরাসরি-সংযুক্ত স্টোরেজের ভবিষ্যতকে অবিলম্বে প্রশ্নবিদ্ধ করে। তারপরে বৃহত্তম হাইপারস্কেল অবকাঠামোর মালিকরা (হাইপারস্কেলার): Facebook, Google, eBay, ইত্যাদি, স্টোরেজ সিস্টেমের জন্য বিপুল পরিমাণ অর্থ প্রদান করতে ক্লান্ত হয়ে তাদের নিজস্ব অ্যাপ্লিকেশন তৈরি করেছে যা বৃহৎ "হার্ডওয়্যার" স্টোরেজের পরিবর্তে নিয়মিত সার্ভারে ডেটা প্রাপ্যতা নিশ্চিত করেছে। সিস্টেম তারপরে অ্যামাজন বাজারে অদ্ভুত কিছু চালু করে যার নাম সিম্পল স্টোরেজ সার্ভিস, বা এস 3। একটি ব্লক নয়, একটি ফাইল নয়, তবে মৌলিকভাবে নতুন কিছু: এটি একটি সিস্টেম কেনা অসম্ভব হয়ে উঠেছে, এটি শুধুমাত্র একটি পরিষেবা কেনা সম্ভব হয়েছে। এক মিনিট দাঁড়াও, আকাশে সেই উজ্জ্বল আলো কী দেখা যাচ্ছে? আরেকটি গ্রহাণু?

জুরাসিক: "ভালো যথেষ্ট সারস" এর যুগ

আমরা "যথেষ্ট ভাল" আদর্শের সাথে স্টোরেজ ডেভেলপমেন্ট পর্যায়ে প্রবেশ করেছি। স্টোরেজ গ্রাহকরা, হাইপারস্কেলাররা কী করেছে তা লক্ষ্য করে, তারা তাদের কর্পোরেট স্টোরেজ সিস্টেমের জন্য হার্ডওয়্যারের অতিরিক্ত ব্যয়ের দশ বা এমনকি শত গুণের ন্যায্যতা নিয়ে প্রশ্ন তুলতে শুরু করে। মধ্য-স্তরের অ্যারেগুলি শীর্ষ-স্তরের সিস্টেমগুলি থেকে বাজারের শেয়ার জিততে শুরু করেছে। পণ্য যেমন HPE 3PAR দ্রুত বৃদ্ধি দেখিয়েছে। EMC Symmetrix, একসময়ের প্রভাবশালী এন্টারপ্রাইজ-শ্রেণির অ্যারে, এখনও কিছু অঞ্চল দখল করেছিল, কিন্তু এটি দ্রুত সঙ্কুচিত হচ্ছিল। অনেক ব্যবহারকারী তাদের ডেটা AWS-এ স্থানান্তর করা শুরু করেছেন।

অন্যদিকে, স্টোরেজ উদ্ভাবকরা হাইপারস্কেলারদের কাছ থেকে ধারনা ধার করতে শুরু করে, বিতরণ করা অনুভূমিকভাবে স্কেলযোগ্য সিস্টেমের প্রযুক্তি ব্যবহার করে - উল্লম্ব স্কেলিং এর বিপরীত একটি আদর্শ। আশা করা হচ্ছে যে নতুন স্টোরেজ সফ্টওয়্যারটি হাইপারস্কেলারের মতোই নিয়মিত সার্ভারে চলতে সক্ষম হবে। সরঞ্জাম নিজেই খরচ 10-100 গুণ বেশি নয়। তাত্ত্বিকভাবে, আপনি যে কোনও সার্ভার ব্যবহার করতে পারেন - পছন্দটি আপনার পছন্দগুলির উপর নির্ভর করে। সফ্টওয়্যার-সংজ্ঞায়িত স্টোরেজ (SDS) এর যুগ শুরু হয়েছে: মেঘ আকাশকে অস্পষ্ট করেছে, তাপমাত্রা হ্রাস পেয়েছে এবং শীর্ষ শিকারীদের জনসংখ্যা হ্রাস পেতে শুরু করেছে।

ক্রিটেসিয়াস সময়কাল: সফ্টওয়্যার-সংজ্ঞায়িত স্টোরেজ সিস্টেমের বিবর্তনের শুরু

সফ্টওয়্যার-সংজ্ঞায়িত স্টোরেজের প্রথম দিনগুলি মাথাব্যথা ছিল। অনেক প্রতিশ্রুতি ছিল, কিন্তু সামান্য বিতরণ করা হয়. একই সময়ে, একটি গুরুত্বপূর্ণ প্রযুক্তিগত পরিবর্তন ঘটেছে: ফ্ল্যাশ মেমরি স্পিনিং রাস্ট (HDD) এর আধুনিক বিকল্প হয়ে উঠেছে। এটি অনেক স্টোরেজ স্টার্টআপ এবং সহজে পরিচালনা করা ভেঞ্চার ক্যাপিটাল অর্থের সময়কাল ছিল। একটি সমস্যার জন্য না হলে সবকিছুই দুর্দান্ত হবে: ডেটা স্টোরেজের জন্য গুরুতর বিবেচনার প্রয়োজন। এটা দেখা যাচ্ছে যে গ্রাহকরা তাদের ডেটা পছন্দ করেন। যদি তারা এটিতে অ্যাক্সেস হারায়, বা টেরাবাইট ডেটাতে কয়েকটি খারাপ বিট পাওয়া যায়, তারা খুব উদ্বিগ্ন এবং উদ্বিগ্ন। বেশিরভাগ স্টার্টআপই টিকেনি। গ্রাহকরা দুর্দান্ত কার্যকারিতা পেয়েছেন, তবে মৌলিক সরঞ্জামগুলির সাথে সবকিছু ভাল ছিল না। বাজে রেসিপি।

সেনোজোয়িক সময়কাল: স্টোরেজ ম্যাসিফের প্রাধান্য

এর পরে যা ঘটেছিল তা নিয়ে খুব কম লোকই কথা বলে, কারণ এটি খুব আকর্ষণীয় নয় - গ্রাহকরা একই ক্লাসিক স্টোরেজ অ্যারে ক্রয় করতে থাকেন। অবশ্যই, যারা তাদের অ্যাপ্লিকেশনগুলিকে ক্লাউডে স্থানান্তরিত করেছে তারাও তাদের ডেটা সেখানে স্থানান্তর করেছে। কিন্তু অধিকাংশ গ্রাহকের জন্য যারা সম্পূর্ণরূপে ক্লাউডে স্যুইচ করতে চান না বা একেবারেই সুইচ করতে চান না, একই হিউলেট প্যাকার্ড এন্টারপ্রাইজ ক্লাসিক অ্যারে অফার করতে থাকে।

আমরা 2019 সালে আছি, তাহলে কেন এখনও Y2K প্রযুক্তির উপর ভিত্তি করে মাল্টি-বিলিয়ন ডলার স্টোরেজ ব্যবসা রয়েছে? কারণ তারা কাজ করে! সহজ কথায়, মিশন-সমালোচনামূলক অ্যাপ্লিকেশনগুলির প্রয়োজনীয়তাগুলি প্রচারের তরঙ্গে তৈরি পণ্যগুলির দ্বারা উপলব্ধি করা যাচ্ছিল না। এইচপিই 3পিএআর-এর মতো পণ্যগুলি এন্টারপ্রাইজ গ্রাহকদের জন্য সেরা বিকল্প হিসাবে রয়ে গেছে এবং এইচপিই 3পিএআর আর্কিটেকচারের নতুন বিবর্তন হল এইচপিই প্রথম - এটি শুধুমাত্র এটি নিশ্চিত করে।

পরিবর্তে, সফ্টওয়্যার-সংজ্ঞায়িত স্টোরেজ সিস্টেমগুলির ক্ষমতাগুলি দুর্দান্ত ছিল: অনুভূমিক স্কেলেবিলিটি, স্ট্যান্ডার্ড সার্ভারগুলির ব্যবহার... তবে এর জন্য মূল্য ছিল: অস্থিতিশীল প্রাপ্যতা, অপ্রত্যাশিত কর্মক্ষমতা এবং নির্দিষ্ট স্কেলেবিলিটি নিয়ম।

গ্রাহকের প্রয়োজনীয়তার জটিলতা হল যে তারা কখনই সহজ হয় না। কেউ বলবে না যে ডেটা অখণ্ডতা হারানো বা ডাউনটাইম বৃদ্ধি গ্রহণযোগ্য। এই কারণেই একটি স্থাপত্য যা একই সাথে আধুনিক দ্রুত বিকশিত ডেটা সেন্টারগুলির প্রয়োজনীয়তা পূরণ করে এবং একটি আপসের সন্ধানে, এন্টারপ্রাইজ-শ্রেণির স্টোরেজ সিস্টেমের মূল বৈশিষ্ট্যগুলি থেকে বাদ পড়ে না স্টোরেজ সিস্টেমগুলির জন্য এত গুরুত্বপূর্ণ।

তৃতীয় সময়কাল: নতুন জীবন ফর্মের উত্থান

স্টোরেজ মার্কেটে নতুনদের মধ্যে একজন কীভাবে দাতেরা - ঐতিহাসিকভাবে প্রতিষ্ঠিত এবং স্টোরেজ সিস্টেমের জন্য নতুন প্রয়োজনীয়তার এমন একটি কঠিন মিশ্রণের সাথে মোকাবিলা করতে পেরেছে তা বোঝার চেষ্টা করা যাক। প্রথমত, উপরে বর্ণিত দ্বিধা সমাধানের উপর দৃষ্টি নিবদ্ধ একটি স্থাপত্য বাস্তবায়নের মাধ্যমে। একটি আধুনিক ডেটা সেন্টারের চ্যালেঞ্জগুলি মোকাবেলা করার জন্য একটি উত্তরাধিকারী স্থাপত্য সংশোধন করা অসম্ভব, ঠিক যেমন এন্টারপ্রাইজ-শ্রেণির সিস্টেমগুলির প্রয়োজনীয়তা মেটাতে একটি গড় সফ্টওয়্যার-সংজ্ঞায়িত স্টোরেজ আর্কিটেকচার সংশোধন করা অসম্ভব: ডাইনোসররা স্তন্যপায়ী হয়ে ওঠেনি কারণ তাপমাত্রা বাদ

আধুনিক ডেটা সেন্টারের তত্পরতার সুবিধা নেওয়ার সময় এন্টারপ্রাইজ স্টোরেজ প্রয়োজনীয়তা পূরণ করে এমন একটি সমাধান তৈরি করা কোনও সহজ কাজ নয়, তবে দাতেরা ঠিক এটিই করতে চলেছে। Datera বিশেষজ্ঞরা পাঁচ বছর ধরে এটি নিয়ে কাজ করছেন এবং "রান্না" এন্টারপ্রাইজ-শ্রেণীর সফ্টওয়্যার-সংজ্ঞায়িত স্টোরেজের জন্য একটি রেসিপি খুঁজে পেয়েছেন।

Datera যে প্রধান অসুবিধার সম্মুখীন হয়েছিল তা হল এটিকে আরও সহজ "OR" এর পরিবর্তে লজিক্যাল অপারেটর "AND" ব্যবহার করতে হয়েছিল। সামঞ্জস্যপূর্ণ প্রাপ্যতা, এবং অনুমানযোগ্য কর্মক্ষমতা, এবং আর্কিটেকচারাল স্কেলেবিলিটি, এবং অর্কেস্ট্রেশন-এ-কোড, এবং প্রমিত হার্ডওয়্যার, এবং নীতি প্রয়োগ, এবং নমনীয়তা, এবং বিশ্লেষণ-চালিত ব্যবস্থাপনা, "এবং" নিরাপত্তা, "এবং" উন্মুক্ত বাস্তুতন্ত্রের সাথে একীকরণ। লজিক্যাল অপারেটর "AND" একটি অক্ষর "OR" এর চেয়ে দীর্ঘ - এটিই প্রধান পার্থক্য।

চতুর্মুখী সময়কাল: আধুনিক তথ্য কেন্দ্র এবং আকস্মিক জলবায়ু পরিবর্তন সফ্টওয়্যার-সংজ্ঞায়িত স্টোরেজ সিস্টেমের বিকাশ পূর্বনির্ধারিত করে

তাহলে কীভাবে দাতেরা এমন একটি স্থাপত্য তৈরি করেছে যা একই সময়ে আধুনিক ডেটা সেন্টারের চাহিদা মেটাতে ঐতিহ্যবাহী এন্টারপ্রাইজ স্টোরেজের চাহিদা পূরণ করে? এটি সব আবার সেই বিরক্তিকর "এবং" অপারেটরের কাছে আসে।

একের পর এক ব্যক্তিগত প্রয়োজনীয়তা মোকাবেলা করার কোন মানে ছিল না। এই জাতীয় উপাদানগুলির যোগফল একক পূর্ণ হবে না। যে কোনো জটিল ব্যবস্থার মতোই, ভারসাম্যপূর্ণ সমঝোতার সমগ্র জটিলতার সতর্কতা অবলম্বন করা গুরুত্বপূর্ণ ছিল। বিকাশ করার সময়, দাতেরা বিশেষজ্ঞদের তিনটি প্রধান নীতি দ্বারা পরিচালিত হয়েছিল:

• অ্যাপ্লিকেশন-নির্দিষ্ট ব্যবস্থাপনা;
• ডেটা নমনীয়তা নিশ্চিত করার জন্য একটি ঐক্যবদ্ধ প্রক্রিয়া;
• ওভারহেড খরচ হ্রাস কারণে উচ্চ কর্মক্ষমতা.

এই নীতিগুলির সাধারণ বৈশিষ্ট্য হল সরলতা। সহজেই আপনার সিস্টেম পরিচালনা করুন, একটি একক, মার্জিত ইঞ্জিনের মাধ্যমে সহজেই আপনার ডেটা পরিচালনা করুন এবং খরচ কমানোর সাথে সাথে অনুমানযোগ্য (এবং উচ্চ) কর্মক্ষমতা প্রদান করুন। কেন সরলতা এত গুরুত্বপূর্ণ? স্টোরেজ জগতের বুদ্ধিমান পেশাদাররা জানেন যে আজকের ডায়নামিক ডেটা সেন্টারের স্টোরেজ প্রয়োজনীয়তা মেটানো শুধুমাত্র গ্রানুলার ম্যানেজমেন্ট, একাধিক ডেটা ম্যানেজমেন্ট টুল এবং পারফরম্যান্স লাভের জন্য হাইপার-অপ্টিমাইজেশন দিয়ে অর্জন করা যায় না। এই ধরনের কৌশলগুলির জটিলটি ইতিমধ্যেই ডাইনোসর স্টোরেজ সিস্টেম হিসাবে আমাদের কাছে পরিচিত।

এই নীতিগুলির সাথে পরিচিতি দাতেরাকে ভালভাবে পরিবেশন করেছে। তারা যে স্থাপত্যটি তৈরি করেছে তাতে একদিকে, একটি আধুনিক এন্টারপ্রাইজ-শ্রেণির স্টোরেজ সিস্টেমের প্রাপ্যতা, কর্মক্ষমতা এবং মাপযোগ্যতা, এবং অন্যদিকে, একটি আধুনিক সফ্টওয়্যার-সংজ্ঞায়িত ডেটা সেন্টারের জন্য প্রয়োজনীয় নমনীয়তা এবং গতি।

রাশিয়ায় Datera এর প্রাপ্যতা

Datera হিউলেট প্যাকার্ড এন্টারপ্রাইজের একটি বিশ্বব্যাপী প্রযুক্তি অংশীদার। Datera পণ্য বিভিন্ন সার্ভার মডেলের সাথে সামঞ্জস্য এবং কর্মক্ষমতা জন্য পরীক্ষা করা হয় এইচপিই প্রোলিয়েন্ট.

আপনি এখানে Datera স্থাপত্য সম্পর্কে আরও জানতে পারেন এইচপিই ওয়েবিনার 31 অক্টোবর।

উত্স: www.habr.com