Qsan XCubeSAN স্টোরেজ সিস্টেমে অটো টিয়ারিং এর বৈশিষ্ট্য

স্টোরেজ সিস্টেমে প্রযোজ্য I/O ক্রিয়াকলাপগুলিকে ত্বরান্বিত করার জন্য প্রযুক্তিগুলি বিবেচনা করা অব্যাহত, শুরু হয়েছিল পূর্ববর্তী নিবন্ধ, কেউ সাহায্য করতে পারে না কিন্তু অটো টিয়ারিংয়ের মতো একটি খুব জনপ্রিয় বিকল্পে থাকতে পারে। যদিও এই ফাংশনের আদর্শটি বিভিন্ন স্টোরেজ সিস্টেম নির্মাতাদের মধ্যে খুব মিল, আমরা একটি উদাহরণ ব্যবহার করে টায়রিং বাস্তবায়নের বৈশিষ্ট্যগুলি দেখব। Qsan স্টোরেজ সিস্টেম.

স্টোরেজ সিস্টেমে সংরক্ষিত ডেটার বিভিন্নতা সত্ত্বেও, এই একই ডেটা তাদের চাহিদার (ব্যবহারের ফ্রিকোয়েন্সি) উপর ভিত্তি করে কয়েকটি গ্রুপে বিভক্ত করা যেতে পারে। সর্বাধিক জনপ্রিয় ("হট") ডেটা যত তাড়াতাড়ি সম্ভব অ্যাক্সেস করা দরকার, যখন কম-ব্যবহৃত ("ঠান্ডা") ডেটা কম অগ্রাধিকারে প্রক্রিয়া করা যেতে পারে।

এই ধরনের একটি স্কিম সংগঠিত করার জন্য, টিয়ারিং কার্যকারিতা ব্যবহার করা হয়। এই ক্ষেত্রে ডেটা অ্যারে একই ধরণের ডিস্ক নিয়ে গঠিত নয়, তবে ড্রাইভের কয়েকটি গ্রুপ যা বিভিন্ন স্টোরেজ স্তর গঠন করে। একটি বিশেষ অ্যালগরিদম ব্যবহার করে, সর্বোচ্চ সামগ্রিক কর্মক্ষমতা নিশ্চিত করতে ডেটা স্বয়ংক্রিয়ভাবে স্তরের মধ্যে স্থানান্তরিত হয়।

SHD কিসান তিনটি স্টোরেজ স্তর পর্যন্ত সমর্থন করে:

• স্তর 1: SSD, সর্বোচ্চ কর্মক্ষমতা
• স্তর 2: HDD SAS 10K/15K, উচ্চ কর্মক্ষমতা
• স্তর 3: HDD NL-SAS 7.2K, সর্বোচ্চ ক্ষমতা

একটি অটো টিয়ারিং পুলে তিনটি স্তর থাকতে পারে, বা যেকোনো সংমিশ্রণে শুধুমাত্র দুটি। প্রতিটি স্তরের মধ্যে, ড্রাইভগুলিকে পরিচিত RAID গ্রুপে একত্রিত করা হয়। সর্বাধিক নমনীয়তার জন্য, প্রতিটি স্তরে RAID স্তর ভিন্ন হতে পারে। অর্থাৎ, উদাহরণস্বরূপ, 4x SSD RAID10 + 6x HDD 10K RAID5 + 12 HDD 7.2K RAID6 এর মতো একটি কাঠামো সংগঠিত করতে কিছুই আপনাকে বাধা দেয় না

ভলিউম তৈরি করার পর (ভার্চুয়াল ডিস্ক) চালু করুন অটো টিয়ারিং এর উপর পুল সমস্ত I/O অপারেশন সম্পর্কে পরিসংখ্যানের পটভূমি সংগ্রহ শুরু করে। এটি করার জন্য, স্থানটি 1GB ব্লকে "কাটা" হয় (তথাকথিত সাব LUN)। প্রতিবার যেমন একটি ব্লক অ্যাক্সেস করা হয়, এটি 1 এর একটি সহগ বরাদ্দ করা হয়। তারপর, সময়ের সাথে সাথে, এই সহগ হ্রাস পায়। 24 ঘন্টা পরে, যদি এই ব্লকে কোন I/O অনুরোধ না থাকে, তাহলে এটি ইতিমধ্যেই 0.5 এর সমান হবে এবং পরবর্তী প্রতি ঘন্টায় কমতে থাকবে।

একটি নির্দিষ্ট সময়ে (ডিফল্টরূপে, প্রতিদিন মধ্যরাতে), সংগৃহীত ফলাফলগুলি তাদের সহগের উপর ভিত্তি করে সাব LUN কার্যকলাপ দ্বারা র‌্যাঙ্ক করা হয়। এর উপর ভিত্তি করে, কোন ব্লকগুলি সরানো হবে এবং কোন দিকে যাবে তা সিদ্ধান্ত নেওয়া হয়। এর পরে, প্রকৃতপক্ষে, স্তরগুলির মধ্যে ডেটা স্থানান্তর ঘটে।

Qsan স্টোরেজ সিস্টেমটি অনেকগুলি পরামিতি ব্যবহার করে টিয়ারিং প্রক্রিয়ার পরিচালনা পুরোপুরি প্রয়োগ করে, যা আপনাকে অ্যারের চূড়ান্ত কার্যকারিতা খুব নমনীয়ভাবে কনফিগার করতে দেয়।

ডেটার প্রাথমিক অবস্থান এবং এর গতিবিধির অগ্রাধিকারের দিক নির্ধারণ করতে, নীতিগুলি ব্যবহার করা হয় যা প্রতিটি ভলিউমের জন্য আলাদাভাবে সেট করা হয়:

• অটো টিয়ারিং - ডিফল্ট নীতি, প্রাথমিক স্থান নির্ধারণ এবং আন্দোলনের দিক স্বয়ংক্রিয়ভাবে নির্ধারিত হয়, যেমন "গরম" ডেটা শীর্ষ স্তরে থাকে এবং "ঠান্ডা" ডেটা নীচে চলে যায়। প্রতিটি স্তরে উপলব্ধ স্থানের উপর ভিত্তি করে প্রাথমিক স্থান নির্বাচন করা হয়। তবে আপনাকে বুঝতে হবে যে সিস্টেমটি প্রাথমিকভাবে দ্রুততম ড্রাইভগুলির সর্বাধিক ব্যবহার করার চেষ্টা করে। অতএব, যদি খালি স্থান থাকে, ডেটা উপরের স্তরে স্থাপন করা হবে। এই নীতিটি বেশিরভাগ পরিস্থিতির জন্য উপযুক্ত যেখানে ডেটা চাহিদা আগে থেকে ভবিষ্যদ্বাণী করা যায় না।
• উচ্চ এবং তারপর স্বয়ংক্রিয় টায়ারিং দিয়ে শুরু করুন - আগেরটির থেকে পার্থক্য শুধুমাত্র ডেটার প্রাথমিক অবস্থানে (দ্রুততম স্তরে)
• সর্বোচ্চ স্তর - ডেটা সর্বদা দ্রুততম স্তরটি দখল করার চেষ্টা করে। অপারেশন চলাকালীন যদি সেগুলি নীচে সরানো হয়, তবে যত তাড়াতাড়ি সম্ভব সেগুলিকে পিছনে সরানো হয়। এই নীতিটি সেই ডেটার জন্য উপযুক্ত যার জন্য দ্রুততম সম্ভাব্য অ্যাক্সেস প্রয়োজন৷
• সর্বনিম্ন স্তর - ডেটা সর্বদা সর্বনিম্ন স্তর দখল করে। এই নীতিটি খুব কমই ব্যবহৃত ডেটার জন্য দুর্দান্ত (উদাহরণস্বরূপ, সংরক্ষণাগারগুলি)৷
• নড়াচড়া নেই - সিস্টেমটি স্বয়ংক্রিয়ভাবে ডেটার আসল অবস্থান নির্ধারণ করে এবং এটি স্থানান্তর করে না। যাইহোক, পরবর্তীকালে তাদের স্থানান্তরের প্রয়োজন হলে পরিসংখ্যান সংগ্রহ করা অব্যাহত থাকে।

এটি লক্ষণীয় যে প্রতিটি ভলিউম তৈরি করার সময় নীতিগুলি সংজ্ঞায়িত করার সময়, সেগুলি সিস্টেমের জীবনচক্র জুড়ে ফ্লাইতে বারবার পরিবর্তন করা যেতে পারে।

টিয়ারিং মেকানিজমের জন্য নীতিগুলি ছাড়াও, স্তরগুলির মধ্যে ডেটা চলাচলের ফ্রিকোয়েন্সি এবং গতিও কনফিগার করা হয়েছে। আপনি একটি নির্দিষ্ট ভ্রমণের সময় সেট করতে পারেন: প্রতিদিন বা সপ্তাহের নির্দিষ্ট দিনে, এবং পরিসংখ্যান সংগ্রহের ব্যবধানকে কয়েক ঘন্টা (সর্বনিম্ন ফ্রিকোয়েন্সি - 2 ঘন্টা) কমিয়ে দিতে পারেন। আপনি যদি ডেটা মুভমেন্ট অপারেশন সম্পূর্ণ করতে সময় সীমিত করতে চান, আপনি একটি সময় ফ্রেম সেট করতে পারেন (চলানোর জন্য উইন্ডো)। এছাড়াও, স্থানান্তরের গতিও নির্দেশিত - 3টি মোড: দ্রুত, মাঝারি, ধীর।

যদি অবিলম্বে ডেটা স্থানান্তরের প্রয়োজন হয় তবে প্রশাসকের নির্দেশে যে কোনও সময় ম্যানুয়ালি এটি সম্পাদন করা সম্ভব।

এটা স্পষ্ট যে স্তরগুলির মধ্যে যত বেশি ঘন ঘন এবং দ্রুত ডেটা স্থানান্তরিত হবে, স্টোরেজ সিস্টেমটি বর্তমান অপারেটিং অবস্থার সাথে খাপ খাইয়ে নিতে তত বেশি নমনীয় হবে। তবে একই সময়ে, এটি মনে রাখা মূল্যবান যে সরানো একটি অতিরিক্ত লোড (প্রাথমিকভাবে ডিস্কগুলিতে), তাই আপনার একেবারে প্রয়োজনীয় না হলে ডেটা "ড্রাইভ" করা উচিত নয়। ন্যূনতম লোডের সময়ে আন্দোলনের পরিকল্পনা করা ভাল। স্টোরেজ সিস্টেম অপারেশন ক্রমাগত 24/7 উচ্চ কর্মক্ষমতা প্রয়োজন, তারপর এটি একটি সর্বনিম্ন স্থানান্তর হার হ্রাস মূল্য.

শুটিং সেটিংসের প্রাচুর্য নিঃসন্দেহে উন্নত ব্যবহারকারীদের খুশি করবে। যাইহোক, যারা প্রথমবার এই ধরনের প্রযুক্তির মুখোমুখি হচ্ছেন, তাদের চিন্তার কিছু নেই। ডিফল্ট সেটিংসে বিশ্বাস করা বেশ সম্ভব (স্বয়ংক্রিয় স্তরের নীতি, দিনে একবার রাতে সর্বোচ্চ গতিতে চলে) এবং পরিসংখ্যান জমা হওয়ার সাথে সাথে প্রয়োজনীয় ফলাফল অর্জনের জন্য নির্দিষ্ট পরামিতিগুলি সামঞ্জস্য করুন।

উত্পাদনশীলতা বৃদ্ধির জন্য যেমন সমান জনপ্রিয় প্রযুক্তির সাথে ছেঁড়া তুলনা SSD ক্যাশিং, আপনার তাদের অ্যালগরিদমের বিভিন্ন অপারেটিং নীতিগুলি মনে রাখা উচিত।

SSD ক্যাশিং
অটো টিয়ারিং

প্রভাব শুরু হওয়ার গতি
প্রায় সঙ্গে সঙ্গে. তবে ক্যাশে "ওয়ার্ম আপ" হওয়ার পরেই লক্ষণীয় প্রভাবটি দেখা যায় (মিনিট থেকে ঘন্টা)
পরিসংখ্যান সংগ্রহ করার পরে (2 ঘন্টা থেকে, আদর্শভাবে একটি দিন) প্লাস ডেটা সরানোর জন্য সময়

প্রভাব সময়কাল
যতক্ষণ না ডেটা একটি নতুন অংশ দ্বারা প্রতিস্থাপিত হয় (মিনিট-ঘন্টা)
ডেটার চাহিদা থাকা অবস্থায় (XNUMX ঘন্টা বা তার বেশি)

ব্যবহারের জন্য নির্দেশাবলী
তাত্ক্ষণিক স্বল্পমেয়াদী কর্মক্ষমতা লাভ (ডাটাবেস, ভার্চুয়ালাইজেশন পরিবেশ)
দীর্ঘ সময়ের জন্য উত্পাদনশীলতা বৃদ্ধি (ফাইল, ওয়েব, মেল সার্ভার)

এছাড়াও, টিয়ারিংয়ের অন্যতম বৈশিষ্ট্য হল এটি শুধুমাত্র "SSD + HDD" এর মতো পরিস্থিতিতেই নয়, "ফাস্ট এইচডিডি + স্লো এইচডিডি" বা এমনকি তিনটি স্তরেই ব্যবহার করার সম্ভাবনা, যা SSD ক্যাশিং ব্যবহার করার সময় মূলত অসম্ভব।

পরীক্ষামূলক

টিয়ারিং অ্যালগরিদমগুলির কার্যকারিতা পরীক্ষা করার জন্য, আমরা একটি সাধারণ পরীক্ষা পরিচালনা করেছি। দুটি স্তরের SSD (RAID 1) + HDD 7.2K (RAID1) এর একটি পুল তৈরি করা হয়েছিল, যার উপর একটি "সর্বনিম্ন স্তর" নীতি সহ একটি ভলিউম স্থাপন করা হয়েছিল৷ সেগুলো. ডেটা সবসময় স্লো ডিস্কে থাকা উচিত।

ম্যানেজমেন্ট ইন্টারফেস স্পষ্টভাবে স্তরের মধ্যে ডেটা স্থাপন দেখায়

ডেটা দিয়ে ভলিউম পূরণ করার পরে, আমরা প্লেসমেন্ট নীতিটিকে অটো টায়রিং-এ পরিবর্তন করেছি এবং IOmeter পরীক্ষা চালিয়েছি।

কয়েক ঘন্টা পরীক্ষার পর, যখন সিস্টেম পরিসংখ্যান জমা করতে সক্ষম হয়, তখন স্থানান্তর প্রক্রিয়া শুরু হয়।

ডেটা মুভমেন্ট সম্পন্ন হওয়ার পর, আমাদের পরীক্ষার ভলিউম সম্পূর্ণভাবে "ক্রল" হয়ে শীর্ষ স্তরে (SSD)।

রায়

অটো টায়রিং একটি চমৎকার প্রযুক্তি যা আপনাকে উচ্চ-গতির ড্রাইভের আরও নিবিড় ব্যবহারের মাধ্যমে ন্যূনতম উপাদান এবং সময় ব্যয় সহ একটি স্টোরেজ সিস্টেমের কর্মক্ষমতা বাড়াতে দেয়। আবেদন করা কিসান একমাত্র বিনিয়োগ হল একটি লাইসেন্স, যা ডিস্ক/তাক/ইত্যাদির ভলিউম/সংখ্যার উপর সীমাবদ্ধতা ছাড়াই একবার এবং সর্বদা কেনা হয়। এই কার্যকারিতাটি এমন সমৃদ্ধ সেটিংস দিয়ে সজ্জিত যে এটি প্রায় কোনও ব্যবসায়িক কাজকে সন্তুষ্ট করতে পারে। এবং ইন্টারফেসে প্রক্রিয়াগুলির ভিজ্যুয়ালাইজেশন আপনাকে কার্যকরভাবে ডিভাইসটি পরিচালনা করার অনুমতি দেবে।

উত্স: www.habr.com