drbd+ocfs2 এর উপর ভিত্তি করে ছোট ওয়েব ক্লাস্টারের জন্য ক্লাস্টার স্টোরেজ

আমরা কি সম্পর্কে কথা বলব:
কিভাবে দ্রুত drbd+ocfs2 সমাধানের উপর ভিত্তি করে দুটি সার্ভারের জন্য শেয়ার্ড স্টোরেজ স্থাপন করা যায়।

এটি কার জন্য দরকারী হবে:
টিউটোরিয়ালটি সিস্টেম অ্যাডমিনিস্ট্রেটরদের জন্য উপযোগী হবে এবং যে কেউ স্টোরেজ বাস্তবায়ন পদ্ধতি বেছে নেয় বা সমাধানটি চেষ্টা করতে চায়।

আমরা কোন সিদ্ধান্ত প্রত্যাখ্যান করেছি এবং কেন?

প্রায়শই আমরা এমন পরিস্থিতির মুখোমুখি হই যেখানে আমাদের একটি ছোট ওয়েব ক্লাস্টারে ভাল পঠন-লেখা কর্মক্ষমতা সহ শেয়ার্ড স্টোরেজ বাস্তবায়ন করতে হবে। আমরা আমাদের প্রকল্পগুলির জন্য শেয়ার্ড স্টোরেজ বাস্তবায়নের জন্য বিভিন্ন বিকল্পের চেষ্টা করেছি, কিন্তু কয়েকটি একযোগে বেশ কয়েকটি সূচকে আমাদের সন্তুষ্ট করতে সক্ষম হয়েছিল। এখন আমরা আপনাকে বলব কেন।

• Glusterfs পড়া এবং লেখার কার্যকারিতা নিয়ে আমাদের সন্তুষ্ট করেনি; প্রচুর সংখ্যক ফাইল একসাথে পড়ার সাথে সমস্যা ছিল এবং CPU-তে একটি উচ্চ লোড ছিল। ফাইল পড়ার সমস্যাটি ইট থেকে সরাসরি অ্যাক্সেস করে সমাধান করা যেতে পারে, তবে এটি সর্বদা প্রযোজ্য নয় এবং সাধারণত ভুল।

• Ceph এর অত্যধিক জটিলতার জন্য পছন্দ করা হয়নি, যা 2-4 সহ প্রকল্পগুলিতে ক্ষতিকারক হতে পারে সার্ভার, বিশেষ করে যদি প্রকল্পটি পরবর্তীতে রক্ষণাবেক্ষণ করা হয়। আবার, উল্লেখযোগ্য কর্মক্ষমতা সীমাবদ্ধতা রয়েছে, যা glusterfs এর মতো পৃথক স্টোরেজ ক্লাস্টার তৈরি করতে বাধ্য করে।

• শেয়ার্ড স্টোরেজ বাস্তবায়নের জন্য একটি NFS সার্ভার ব্যবহার করা ত্রুটি সহনশীলতার ক্ষেত্রে প্রশ্ন উত্থাপন করে।

• s3 একটি নির্দিষ্ট পরিসরের কাজের জন্য একটি চমৎকার জনপ্রিয় সমাধান, কিন্তু এটি একটি ফাইল সিস্টেম নয়, যা এর সুযোগকে সংকুচিত করে।

• lsyncd. যদি আমরা ইতিমধ্যেই "নন-ফাইল সিস্টেম" সম্পর্কে কথা বলা শুরু করে থাকি, তবে এই জনপ্রিয় সমাধানটি বিবেচনা করা উচিত। এটি কেবল দ্বি-মুখী বিনিময়ের জন্য উপযুক্ত নয় (তবে আপনি যদি সত্যিই চান তবে আপনি করতে পারেন), এটি প্রচুর সংখ্যক ফাইলে স্থিরভাবে কাজ করে না। পুরো জিনিসটিতে একটি চমৎকার সংযোজন হল এটি একক-থ্রেডেড। কারণটি প্রোগ্রামটির আর্কিটেকচারে রয়েছে: এটি কাজের অবজেক্টগুলি নিরীক্ষণ করতে ইনোটিফাই ব্যবহার করে, যা এটি শুরুতে এবং পুনরায় স্ক্যান করার সময় বরাদ্দ করে। rsync স্থানান্তর মাধ্যম হিসাবে ব্যবহৃত হয়।

টিউটোরিয়াল: কিভাবে drbd+ocfs2 এর উপর ভিত্তি করে শেয়ার্ড স্টোরেজ স্থাপন করবেন

আমাদের জন্য সবচেয়ে সুবিধাজনক সমাধান এক লিঙ্ক ছিল ocfs2+drbdএখন আমরা আপনাকে বলব কিভাবে আপনি দ্রুত দুজনের জন্য শেয়ার্ড স্টোরেজ স্থাপন করতে পারেন সার্ভার এই সমাধানগুলির উপর ভিত্তি করে। তবে প্রথমে, উপাদানগুলি সম্পর্কে একটু:

ডিআরবিডি স্ট্যান্ডার্ড ডেলিভারি থেকে স্টোরেজ সিস্টেম Linuxযা সার্ভারগুলোর মধ্যে ব্লক-ভিত্তিক ডেটা প্রতিলিপিকরণের সুযোগ দেয়। এর প্রধান প্রয়োগ হলো ত্রুটি-সহনশীল স্টোরেজ তৈরিতে।

OCFS2 — একটি ফাইল সিস্টেম যা একাধিক সিস্টেমকে একই স্টোরেজ ভাগাভাগি করে ব্যবহার করতে সক্ষম করে। ডিস্ট্রিবিউশনের অন্তর্ভুক্ত। Linux এটিতে একটি কার্নেল মডিউল এবং ফাইল সিস্টেম নিয়ে কাজ করার জন্য ইউজারস্পেস টুলস রয়েছে। OCFS2 শুধু DRBD-এর মাধ্যমেই নয়, বরং একাধিক সংযোগ সহ iSCSI-এর মাধ্যমেও ব্যবহার করা যায়। আমাদের উদাহরণে, আমরা DRBD ব্যবহার করেছি।

সমস্ত ক্রিয়া সম্পাদন করা হয় ubuntu ন্যূনতম কনফিগারেশনে সার্ভার ১৮.০৪।

ধাপ 1. DRBD কনফিগার করুন:

/etc/drbd.d/drbd0.res ফাইলে আমরা আমাদের ভার্চুয়াল ব্লক ডিভাইস /dev/drbd0 বর্ণনা করি:

resource drbd0 {
    syncer { rate 1000M; }
    net {
        allow-two-primaries;
        after-sb-0pri discard-zero-changes;
        after-sb-1pri discard-secondary;
        after-sb-2pri disconnect;
    }
    startup { become-primary-on both; }
    on drbd1 {
        meta-disk internal;
        device /dev/drbd0;
        disk /dev/vdb1;
        address 10.10.10.192:7789;
}
    on drbd2 {
        meta-disk internal;
        device /dev/drbd0;
        disk /dev/vdb1;
        address 10.10.10.193:7789;
}
}

মেটা-ডিস্ক অভ্যন্তরীণ — মেটাডেটা সংরক্ষণ করতে একই ব্লক ডিভাইস ব্যবহার করুন
ডিভাইস /dev/drbd0 — drbd ভলিউমের পথ হিসাবে /dev/drbd0 ব্যবহার করুন।
ডিস্ক /dev/vdb1 - /dev/vdb1 ব্যবহার করুন
সিঙ্কার { হার 1000M; } - গিগাবিট চ্যানেল ব্যান্ডউইথ ব্যবহার করুন
অনুমতি-দুই-প্রাথমিক - একটি গুরুত্বপূর্ণ বিকল্প যা দুটি প্রাথমিক সার্ভারে পরিবর্তনগুলি গ্রহণ করার অনুমতি দেয়
after-sb-0pri, after-sb-1pri, after-sb-2pri — যখন স্প্লিটব্রেন সনাক্ত করা হয় তখন নোডের ক্রিয়াগুলির জন্য দায়ী বিকল্পগুলি। আরো বিস্তারিত ডকুমেন্টেশন পাওয়া যাবে.
হয়ে উঠুন-প্রাথমিক-উভয় — উভয় নোডকে প্রাইমারিতে সেট করে।

আমাদের ক্ষেত্রে, আমাদের কাছে 10 গিগাবিটের থ্রুপুট সহ একটি ডেডিকেটেড ভার্চুয়াল নেটওয়ার্ক সহ দুটি সম্পূর্ণ অভিন্ন VM রয়েছে।

আমাদের উদাহরণে, দুটি ক্লাস্টার নোডের নেটওয়ার্ক নাম হল drbd1 এবং drbd2। সঠিক ক্রিয়াকলাপের জন্য, আপনাকে /etc/hosts-এ হোস্টের নাম এবং IP ঠিকানার সাথে মেলাতে হবে।

10.10.10.192 drbd1
10.10.10.193 drbd2

ধাপ 2. নোড সেট আপ করুন:

উভয় সার্ভারে আমরা চালাই:

drbdadm create-md drbd0

modprobe drbd
drbdadm up drbd0
cat /proc/drbd

আমরা নিম্নলিখিত পেতে:

আপনি সিঙ্ক্রোনাইজেশন শুরু করতে পারেন। প্রথম নোডে আপনাকে কার্যকর করতে হবে:

drbdadm primary --force drbd0

চলুন স্ট্যাটাস দেখিঃ

cat /proc/drbd

দুর্দান্ত, সিঙ্ক্রোনাইজেশন শুরু হয়েছে। আমরা শেষ পর্যন্ত অপেক্ষা করি এবং ছবিটি দেখি:

ধাপ 3. দ্বিতীয় নোডে সিঙ্ক্রোনাইজেশন শুরু করুন:

drbdadm primary --force drbd0

আমরা নিম্নলিখিত পেতে:

এখন আমরা দুটি সার্ভার থেকে drbd-এ লিখতে পারি।

ধাপ 4. ocfs2 ইনস্টল এবং কনফিগার করুন।

আমরা একটি মোটামুটি তুচ্ছ কনফিগারেশন ব্যবহার করব:

cluster:
     node_count = 2
     name = ocfs2cluster

node:
     number = 1
     cluster = ocfs2cluster
     ip_port = 7777
     ip_address = 10.10.10.192
     name = drbd1

node:
     number = 2
     cluster = ocfs2cluster
     ip_port = 7777
     ip_address = 10.10.10.193
     name = drbd2

এটা লিখে রাখা প্রয়োজন /etc/ocfs2/cluster.conf উভয় নোডের উপর।

আমরা যেকোনো নোডে drbd0 এ একটি FS তৈরি করি:

mkfs.ocfs2 -L "testVol" /dev/drbd0

এখানে আমরা ডিফল্ট প্যারামিটার ব্যবহার করে drbd0-এ testVol লেবেল সহ একটি ফাইল সিস্টেম তৈরি করেছি।

/etc/default/o2cb-এ আপনাকে সেট করতে হবে (আমাদের কনফিগারেশন ফাইলের মতো)

O2CB_ENABLED=true 
O2CB_BOOTCLUSTER=ocfs2cluster 

এবং প্রতিটি নোডে চালান:

o2cb register-cluster ocfs2cluster

তারপরে আমরা চালু করি এবং অটোরান করার জন্য প্রয়োজনীয় সমস্ত ইউনিট যুক্ত করি:

systemctl enable drbd o2cb ocfs2
systemctl start drbd o2cb ocfs2

এর মধ্যে কিছু সেটআপ প্রক্রিয়া চলাকালীন ইতিমধ্যেই চলছে৷

ধাপ 5. উভয় নোডে fstab-এ মাউন্ট পয়েন্ট যোগ করুন:

/dev/drbd0 /media/shared ocfs2 defaults,noauto,heartbeat=local 0 0

ডিরেক্টরি /media/shared এটা আগাম তৈরি করা আবশ্যক.

এখানে আমরা noauto বিকল্পগুলি ব্যবহার করি, যার মানে হল যে ফাইলটি স্টার্টআপে মাউন্ট করা হবে না (আমি systemd এর মাধ্যমে নেটওয়ার্ক ফাইলগুলি মাউন্ট করতে পছন্দ করি) এবং heartbeat=local, যার অর্থ প্রতিটি নোডে হার্টবিট পরিষেবা ব্যবহার করা। এছাড়াও বিশ্বব্যাপী হৃদস্পন্দন রয়েছে, যা বড় ক্লাস্টারগুলির জন্য আরও উপযুক্ত।

পরবর্তী আপনি মাউন্ট করতে পারেন /media/shared এবং বিষয়বস্তু সিঙ্ক্রোনাইজেশন পরীক্ষা করুন।

সম্পন্ন! ফলস্বরূপ, আমরা স্কেলেবিলিটি এবং শালীন কর্মক্ষমতা সহ কমবেশি ত্রুটি-সহনশীল স্টোরেজ পাই।

উত্স: www.habr.com