আইএসসিএসআই-এর মাধ্যমে Ceph - বা হ্যামকে দাঁড়িয়ে স্কিইং করা

আমাদের মধ্যে (তসেফভোদভ) কি এমন কিছু আছে যারা "পেশাদার চরম" পছন্দ করেন না?

এটি অসম্ভাব্য - অন্যথায় আমরা এই অত্যন্ত আকর্ষণীয় এবং মজার পণ্যটির সাথে ঘোরাঘুরি করব না।

যারা Ceph-এর অপারেশনের সাথে জড়িত ছিল তাদের মধ্যে অনেকেই এমন একটির সাথে দেখা করেছে যা খুব ঘন ঘন নয় (অথবা এমনকি খুব বিরল) কিন্তু কখনও কখনও চাহিদার ক্ষেত্রে - iSCSI বা FC এর মাধ্যমে Ceph এর সাথে সংযোগ স্থাপন করে। কি জন্য? ভাল, উদাহরণস্বরূপ, একটি উইন্ডোজ বা সোলারিস সার্ভারে Ceph থেকে একটি চিত্র জমা দিন যা এখনও কিছু কারণে ভার্চুয়ালাইজ করা হয়নি। অথবা একটি ভার্চুয়ালাইজড, কিন্তু একটি হাইপারভাইজার ব্যবহার করে যা Ceph করতে পারে না - এবং, আমরা জানি, সেগুলি প্রচুর আছে। উদাহরণ স্বরূপ? ভাল, উদাহরণস্বরূপ, HyperV বা ESXi, যা সক্রিয়ভাবে ব্যবহৃত হয়। এবং যদি কাজটি Ceph থেকে একটি অতিথি মেশিনে একটি চিত্র পরিবেশন করার উদ্ভব হয় তবে এটি একটি খুব উত্তেজনাপূর্ণ কাজে পরিণত হয়।

তাই দেওয়া হয়েছে:

1. একটি ইতিমধ্যে চলমান Ceph ক্লাস্টার
2. একটি ইতিমধ্যে বিদ্যমান চিত্র যা iSCSI এর মাধ্যমে পরিবেশন করা আবশ্যক
3. পুলের নাম মাইপুল, ছবির নাম মাইমেজ

শুরু?

প্রথমত, যখন আমরা FC বা iSCSI সম্পর্কে কথা বলি, তখন আমাদের কাছে সূচনাকারী এবং লক্ষ্য হিসাবে এই ধরনের সত্তা রয়েছে। টার্গেট আসলে একটি সার্ভার, ইনিশিয়েটর হল ক্লায়েন্ট। আমাদের কাজ হল ন্যূনতম প্রচেষ্টার সাথে সূচনাকারীর কাছে Ceph ইমেজ জমা দেওয়া। এর মানে আমাদের লক্ষ্য প্রসারিত করতে হবে। কিন্তু কোথায়, কোন কম্পিউটারে?

সৌভাগ্যবশত, একটি Ceph ক্লাস্টারে আমাদের অন্তত একটি উপাদান আছে যার IP ঠিকানা স্থির করা আছে এবং যার উপর Ceph-এর সবচেয়ে গুরুত্বপূর্ণ উপাদানগুলির একটি কনফিগার করা আছে এবং সেই উপাদানটি হল মনিটর৷ তদনুসারে, আমরা মনিটরে একটি iSCSI টার্গেট ইনস্টল করি (এবং একই সময়ে, অন্তত পরীক্ষার জন্য)। আমি সেন্টোসে এটি করেছি, তবে সমাধানটি অন্য কোনও বিতরণের জন্যও উপযুক্ত - আপনাকে কেবল আপনার বিতরণে গ্রহণযোগ্য উপায়ে প্যাকেজগুলি ইনস্টল করতে হবে।

# yum -y install iscsi-initiator-utils targetcli

ইনস্টল করা প্যাকেজগুলির উদ্দেশ্য কী?

• টার্গেটক্লি — Linux কার্নেলে নির্মিত SCSI টার্গেট পরিচালনার জন্য একটি ইউটিলিটি
• iscsi-initiator-utils — Linux কার্নেলে অন্তর্নির্মিত iSCSI ইনিশিয়েটর পরিচালনা করতে ব্যবহৃত ইউটিলিটি সহ একটি প্যাকেজ

সূচনাকারীর কাছে iSCSI-এর মাধ্যমে একটি ছবি জমা দেওয়ার জন্য, ইভেন্টগুলির বিকাশের জন্য দুটি বিকল্প রয়েছে - লক্ষ্যের ইউজারস্পেস ব্যাকএন্ড ব্যবহার করুন বা অপারেটিং সিস্টেমে দৃশ্যমান ব্লক ডিভাইস হিসাবে চিত্রটিকে সংযুক্ত করুন এবং iSCSI এর মাধ্যমে রপ্তানি করুন। আমরা দ্বিতীয় পথে যাব - ইউজারস্পেস ব্যাকএন্ড এখনও "পরীক্ষামূলক" অবস্থায় আছে এবং উৎপাদনশীল ব্যবহারের জন্য সামান্য প্রস্তুত নয়। উপরন্তু, এটির সাথে অসুবিধা রয়েছে, যার সম্পর্কে আপনি অনেক কথা বলতে পারেন এবং (ওহ ভয়াবহ!) তর্ক করতে পারেন।

যদি আমরা একটি দীর্ঘ সমর্থন চক্রের সাথে কিছুটা স্থিতিশীল বন্টনও ব্যবহার করি, তাহলে আমাদের কাছে যে কার্নেলটি আছে তা হল কিছু প্রাচীন, প্রাচীন সংস্করণ। উদাহরণস্বরূপ, CentOS7 এ এটি 3.10.*, CentOS8 এ এটি 4.19। এবং আমরা কমপক্ষে 5.3 (বা বরং 5.4) এবং নতুন একটি কার্নেলে আগ্রহী। কেন? কারণ ডিফল্টরূপে Ceph ইমেজগুলিতে সক্রিয় বিকল্পগুলির একটি সেট থাকে যা পুরানো কার্নেলের সাথে সামঞ্জস্যপূর্ণ নয়। এর মানে হল যে আমরা আমাদের বিতরণের জন্য একটি নতুন কার্নেলের সাথে একটি সংগ্রহস্থল সংযুক্ত করি (উদাহরণস্বরূপ, CentOS এর জন্য এটি elrepo), নতুন কার্নেল ইনস্টল করুন এবং নতুন কার্নেলের সাথে কাজ করার জন্য সিস্টেমটি পুনরায় বুট করুন:

• পরীক্ষার জন্য নির্বাচিত মনিটরের সাথে সংযোগ করুন
• আমরা নির্দেশাবলী অনুসারে এলরেপো সংগ্রহস্থলগুলিকে সংযুক্ত করি - elrepo.org/tiki/tiki-index.php
• কার্নেল ইনস্টল করুন: yum -y —enablerepo=elrepo-kernel install kernel-ml
• মনিটর দিয়ে সার্ভার রিবুট করুন (আমাদের তিনটি মনিটর আছে, তাই না?)

একটি ব্লক ডিভাইস হিসাবে ইমেজ সংযোগ

# rbd map mypool/myimage
/dev/rbd0

যা অবশিষ্ট থাকে তা হল লক্ষ্য কনফিগার করা। এই উদাহরণে, আমি তথাকথিত লক্ষ্যটি কনফিগার করব। ডেমো মোড - প্রমাণীকরণ ছাড়াই, সবার কাছে দৃশ্যমান এবং অ্যাক্সেসযোগ্য। একটি উত্পাদন পরিবেশে, আপনি সম্ভবত প্রমাণীকরণ কনফিগার করতে চাইবেন - তবে এটি আজকের কেবলমাত্র মজার অনুশীলনের জন্য কিছুটা সুযোগের বাইরে।

/dev/rbd/mypool/myimage ফাইলের সাথে যুক্ত disk1 নামে একটি ব্যাকএন্ড তৈরি করুন। নির্দিষ্ট ফাইলটি একটি প্রতীকী লিঙ্ক যা udev ডেমন দ্বারা স্বয়ংক্রিয়ভাবে /dev/rbd0-তে তৈরি হয়। আমরা একটি প্রতীকী লিঙ্ক ব্যবহার করি কারণ rbd ডিভাইসের নাম পরিবর্তন হতে পারে যে ক্রম অনুসারে Ceph চিত্রগুলি হোস্টের সাথে সংযুক্ত রয়েছে তার উপর নির্ভর করে।

একটি ব্যাকএন্ড তৈরি করুন:

# targetcli /backstores/block create disk1 /dev/rbd/mypool/myimage

একটি iSCSI লক্ষ্য তৈরি করুন:

# targetcli /iscsi create iqn.2020-01.demo.ceph:mypool

আমরা লক্ষ্যের সাথে একটি LUN হিসাবে ব্যাকএন্ড সংযোগ করি:

# targetcli /iscsi/iqn.2020-01.demo.ceph:mypool/tpg1/luns create /backstores/block/disk1

ডেমো মোডের জন্য লক্ষ্য কনফিগার করা যাক:

# targetcli /iscsi/iqn.2020-01.demo.ceph:mypool/tpg1/ set
> attribute demo_mode_write_protect=0
# targetcli /iscsi/iqn.2020-01.demo.ceph:mypool/tpg1/ set
> attribute generate_node_acls=1
# targetcli /iscsi/iqn.2020-01.demo.ceph:mypool/tpg1/ set
> attribute cache_dynamic_acls=1

কনফিগারেশন সংরক্ষণ করুন:

# targetcli saveconfig

লক্ষ্যের উপস্থিতি পরীক্ষা করা হচ্ছে:

# iscsiadm -m discovery -t st -p 127.0.0.1:3260
127.0.0.1:3260,1 iqn.2020-01.demo.ceph:mypool

আমরা লক্ষ্য সংযোগ:

# iscsiadm -m node --login
Logging in to [iface: default, target: iqn.2020-01.demo.ceph:mypool, portal: 127.0.0.1,3260] (multiple)
Login to [iface: default, target: iqn.2020-01.demo.ceph:mypool, portal: 127.0.0.1,3260] successful.

আপনি যদি সবকিছু সঠিকভাবে করেন তবে সার্ভারে একটি নতুন ডিস্ক প্রদর্শিত হবে, যা দেখতে একটি SCSI ডিভাইসের মতো, কিন্তু প্রকৃতপক্ষে Ceph থেকে একটি ছবি, একটি iSCSI টার্গেটের মাধ্যমে অ্যাক্সেস করা হয়েছে। বুট সমস্যা এড়াতে, স্থানীয় সূচনাকারী থেকে সংযুক্ত ডিস্ক এবং সনাক্ত করা লক্ষ্যটি সরিয়ে ফেলা ভাল:

# iscsiadm -m node --logout
# iscsiadm -m discoverydb -o delete -t st -p 127.0.0.1:3260

যা অবশিষ্ট থাকে তা হল কনফিগারেশনটি বজায় রাখা যাতে চিত্রটি স্বয়ংক্রিয়ভাবে সংযুক্ত হয় এবং সংযোগের পরে, লক্ষ্যটি স্তরিত হয়। একটি টার্গেট লঞ্চ করার দুটি ধাপ থাকে - RBD এর সাথে সংযোগ করা এবং আসলে টার্গেট চালু করা।

প্রথমে, হোস্টের সাথে RBD ছবির স্বয়ংক্রিয় সংযোগ কনফিগার করা যাক। এটি /etc/ceph/rbdmap ফাইলে নিম্নলিখিত লাইনগুলি যোগ করে করা হয়:

# cat /etc/ceph/rbdmap
# RbdDevice Parameters
mypool/myimage id=admin
# systemctl enable rbdmap

লক্ষ্য কনফিগারেশন পুনরুদ্ধার করা একটু বেশি জটিল - আমাদের সিস্টেমডের জন্য একটি ইউনিট লিখতে হবে যা কনফিগারেশন পুনরুদ্ধার করবে:

# cat /usr/lib/systemd/system/scsi-target.service
[Unit] Description=Start iSCSI target

After=network-online.target rbdmap.service
Before=remote-fs-pre.target
Wants=network-online.target remote-fs-pre.target

[Service] Type=oneshot
RemainAfterExit=yes
ExecStart=/bin/targetcli restoreconfig

[Install] WantedBy=multi-user.target

# systemctl daemon-reload
# systemctl enable scsi-target

চূড়ান্ত পরীক্ষা হল আমাদের মনিটর আবার রিবুট করা (এটি এখন একটি iSCSI লক্ষ্য)। এটা লক্ষ করা উচিত যে যদি আমরা কমান্ডের সাথে ইনিশিয়েটরের ডাটাবেস সাফ না করতাম iscsiadm -n discoverydb -o মুছে ফেলুন ... আপনি এমন একটি সার্ভারের সাথে শেষ করতে পারেন যা লোড হয় না বা লোড হতে অনেক সময় নেয়।

কি বাকী আছে?

সার্ভারে ইনিশিয়েটর কনফিগার করুন যেখানে আমরা লক্ষ্য পাঠাতে চাই।

কিভাবে আমাদের লক্ষ্যের দোষ সহনশীলতা নিশ্চিত করা যায়?

আপনি একইভাবে অন্যান্য মনিটরে লক্ষ্যগুলি কনফিগার করতে পারেন এবং মাল্টিপাথ সেট আপ করতে পারেন (ভিএমওয়্যার এটি বুঝতে পারে এবং এমনকি কাজ করে, হাইপার-ভি বুঝতে পারে না - এর জন্য SCSI লক প্রয়োজন)। যেহেতু কার্নেল থেকে Ceph ক্লায়েন্ট ক্যাশিং ব্যবহার করে না, এটি বেশ কার্যকর। অথবা অন্য একটি বিকল্প হল তিনটি উপাদানের একটি ক্লাস্টার রিসোর্স তৈরি করা - একটি ডেডিকেটেড টার্গেট আইপি অ্যাড্রেস এবং rbdmap এবং scsi-টার্গেট পরিষেবা, এবং ক্লাস্টারিং টুলের মাধ্যমে এই সংস্থানটি পরিচালনা করা (কে পেসমেকার বলেছেন?)

পরিবর্তে একটি বিপরীত শব্দ এর পরিবর্তে

যেমনটি পরিষ্কার, এই নিবন্ধটি কিছুটা রসিকতার বিষয় - তবে এতে আমি "দ্রুত এবং উদাহরণ সহ" একই সময়ে বেশ কয়েকটি মোটামুটি জনপ্রিয় বিষয় বিবেচনা করার চেষ্টা করেছি - iSCSI টার্গেট, যা অগত্যা Ceph চিত্রগুলি রপ্তানি করতে পারে না - তবে উদাহরণস্বরূপ, LVM ভলিউম রপ্তানি করুন, একটি iSCSI ইনিশিয়েটরের সাথে কাজ করার মূল বিষয়গুলি (কীভাবে একটি টার্গেট স্ক্যান করতে হয়, কিভাবে একটি টার্গেটের সাথে সংযোগ করতে হয়, সংযোগ বিচ্ছিন্ন করা যায়, ডাটাবেস থেকে একটি টার্গেট এন্ট্রি মুছে ফেলা হয়), systemd এর জন্য আপনার নিজস্ব ইউনিট লিখুন এবং কিছু অন্যান্য

আমি আশা করি যে আপনি এই সম্পূর্ণ পরীক্ষাটি সম্পূর্ণরূপে পুনরাবৃত্তি না করলেও, এই নিবন্ধটি থেকে অন্তত কিছু আপনার কাজে লাগবে।

উত্স: www.habr.com