🥇iSCSI के माध्यम से सेफ - या झूले में खड़े होकर स्कीइंग

क्या हमारे बीच (त्सेफोवोडोव) ऐसे लोग हैं जो "पेशेवर चरम" को पसंद नहीं करते हैं?

इसकी संभावना नहीं है - अन्यथा हम इस बेहद दिलचस्प और मज़ेदार उत्पाद के साथ खिलवाड़ नहीं कर रहे होते।

जो लोग सेफ के ऑपरेशन में शामिल थे, उनमें से कई लोगों को एक बहुत बार नहीं (या बल्कि बहुत ही कम) लेकिन कभी-कभी मांग के मामले में - सेफ को आईएससीएसआई या एफसी के माध्यम से जोड़ने का सामना करना पड़ा है। किस लिए? ठीक है, उदाहरण के लिए, सेफ से विंडोज या सोलारिस सर्वर पर एक छवि सबमिट करें जो अभी तक किसी कारण से वर्चुअलाइज्ड नहीं हुई है। या एक वर्चुअलाइज्ड, लेकिन एक हाइपरवाइजर का उपयोग करना जो सेफ नहीं कर सकता - और, जैसा कि हम जानते हैं, उनमें से बहुत सारे हैं। उदाहरण के लिए? खैर, उदाहरण के लिए, हाइपरवी या ईएसएक्सआई, जो सक्रिय रूप से उपयोग किए जाते हैं। और यदि कार्य सेफ से अतिथि मशीन तक एक छवि परोसने का हो, तो यह एक बहुत ही रोमांचक कार्य बन जाता है।

तो, दिया गया:

पहले से चल रहा सेफ़ क्लस्टर
पहले से मौजूद छवि जिसे iSCSI के माध्यम से प्रस्तुत किया जाना चाहिए
पूल का नाम mypool, छवि का नाम मेरी छवि

शुरू करना?

सबसे पहले, जब हम एफसी या आईएससीएसआई के बारे में बात करते हैं, तो हमारे पास आरंभकर्ता और लक्ष्य जैसी संस्थाएं होती हैं। लक्ष्य वास्तव में एक सर्वर है, आरंभकर्ता एक ग्राहक है। हमारा कार्य न्यूनतम प्रयास के साथ आरंभकर्ता को सेफ छवि प्रस्तुत करना है। इसका मतलब है कि हमें लक्ष्य का विस्तार करना चाहिए। लेकिन कहाँ, किस कंप्यूटर पर?

सौभाग्य से, सेफ क्लस्टर में हमारे पास कम से कम एक घटक होता है जिसका आईपी पता तय होता है और जिस पर सेफ के सबसे महत्वपूर्ण घटकों में से एक कॉन्फ़िगर किया गया है, और वह घटक मॉनिटर है। तदनुसार, हम मॉनिटर पर एक iSCSI लक्ष्य स्थापित करते हैं (और एक ही समय में, कम से कम परीक्षणों के लिए एक आरंभकर्ता)। मैंने इसे CentOS पर किया, लेकिन समाधान किसी अन्य वितरण के लिए भी उपयुक्त है - आपको बस उस तरीके से पैकेज स्थापित करने की आवश्यकता है जो आपके वितरण में स्वीकार्य है।

# yum -y install iscsi-initiator-utils targetcli

संस्थापित पैकेजों का उद्देश्य क्या है?

टारगेटक्ली - लिनक्स कर्नेल में निर्मित एससीएसआई लक्ष्य को प्रबंधित करने के लिए एक उपयोगिता
iscsi-आरंभकर्ता-उपयोग - लिनक्स कर्नेल में निर्मित iSCSI आरंभकर्ता को प्रबंधित करने के लिए उपयोग की जाने वाली उपयोगिताओं वाला एक पैकेज

आरंभकर्ता को iSCSI के माध्यम से एक छवि सबमिट करने के लिए, घटनाओं के विकास के लिए दो विकल्प हैं - लक्ष्य के यूजरस्पेस बैकएंड का उपयोग करें या छवि को ऑपरेटिंग सिस्टम पर दृश्यमान ब्लॉक डिवाइस के रूप में कनेक्ट करें और इसे iSCSI के माध्यम से निर्यात करें। हम दूसरे रास्ते पर जाएंगे - यूजरस्पेस बैकएंड अभी भी "प्रयोगात्मक" स्थिति में है और उत्पादक उपयोग के लिए थोड़ा तैयार नहीं है। इसके अलावा, इसके साथ नुकसान भी हैं, जिनके बारे में आप बहुत सारी बातें कर सकते हैं और (ओह डरावनी!) बहस कर सकते हैं।

यदि हम लंबे समर्थन चक्र के साथ कुछ हद तक स्थिर वितरण का भी उपयोग करते हैं, तो हमारे पास जो कर्नेल है वह कुछ प्राचीन, प्राचीन संस्करण है। उदाहरण के लिए, CentOS7 में यह 3.10.* है, CentOS8 में यह 4.19 है। और हम कम से कम 5.3 (या बल्कि 5.4) और नए कर्नेल में रुचि रखते हैं। क्यों? क्योंकि डिफ़ॉल्ट रूप से सेफ छवियों में विकल्पों का एक सेट सक्षम होता है जो पुराने कर्नेल के साथ संगत नहीं होता है। इसका मतलब है कि हम अपने वितरण के लिए एक रिपॉजिटरी को एक नए कर्नेल से जोड़ते हैं (उदाहरण के लिए, CentOS के लिए यह elrepo है), नया कर्नेल स्थापित करें और नए कर्नेल के साथ काम करने के लिए सिस्टम को रीबूट करें:

प्रयोग के लिए चयनित मॉनिटर से कनेक्ट करें
हम निर्देशों के अनुसार एल्रेपो रिपॉजिटरी को जोड़ते हैं - elrepo.org/tiki/tiki-index.php
कर्नेल स्थापित करें: yum -y —enablerepo=elrepo-kernel कर्नेल-एमएल स्थापित करें
मॉनिटर के साथ सर्वर को रीबूट करें (हमारे पास तीन मॉनिटर हैं, है ना?)

छवि को एक ब्लॉक डिवाइस के रूप में कनेक्ट करना

# rbd map mypool/myimage /dev/rbd0

जो कुछ बचा है वह लक्ष्य को कॉन्फ़िगर करना है। इस उदाहरण में, मैं तथाकथित में लक्ष्य को कॉन्फ़िगर करूंगा। डेमो मोड - प्रमाणीकरण के बिना, सभी के लिए दृश्यमान और सुलभ। उत्पादन परिवेश में, आप संभवतः प्रमाणीकरण कॉन्फ़िगर करना चाहेंगे - लेकिन यह आज के मनोरंजन के लिए किए जाने वाले अभ्यास के दायरे से थोड़ा बाहर है।

/dev/rbd/mypool/myimage फ़ाइल से संबद्ध डिस्क1 नामक बैकएंड बनाएं। निर्दिष्ट फ़ाइल udev डेमॉन द्वारा /dev/rbd0 के लिए स्वचालित रूप से बनाई गई एक प्रतीकात्मक लिंक है। हम एक प्रतीकात्मक लिंक का उपयोग करते हैं क्योंकि आरबीडी डिवाइस का नाम उस क्रम के आधार पर बदल सकता है जिसमें सेफ छवियां होस्ट से जुड़ी हुई हैं।

एक बैकएंड बनाएं:

# targetcli /backstores/block create disk1 /dev/rbd/mypool/myimage

एक iSCSI लक्ष्य बनाएं:

# targetcli /iscsi create iqn.2020-01.demo.ceph:mypool

हम बैकएंड को LUN के रूप में लक्ष्य से जोड़ते हैं:

# targetcli /iscsi/iqn.2020-01.demo.ceph:mypool/tpg1/luns create /backstores/block/disk1

आइए डेमो मोड के लिए लक्ष्य कॉन्फ़िगर करें:

# targetcli /iscsi/iqn.2020-01.demo.ceph:mypool/tpg1/ set > attribute demo_mode_write_protect=0 # targetcli /iscsi/iqn.2020-01.demo.ceph:mypool/tpg1/ set > attribute generate_node_acls=1 # targetcli /iscsi/iqn.2020-01.demo.ceph:mypool/tpg1/ set > attribute cache_dynamic_acls=1

कॉन्फ़िगरेशन सहेजें:

# targetcli saveconfig

लक्ष्य की उपलब्धता की जाँच करना:

# iscsiadm -m discovery -t st -p 127.0.0.1:3260 127.0.0.1:3260,1 iqn.2020-01.demo.ceph:mypool

हम लक्ष्य को जोड़ते हैं:

# iscsiadm -m node --login Logging in to [iface: default, target: iqn.2020-01.demo.ceph:mypool, portal: 127.0.0.1,3260] (multiple) Login to [iface: default, target: iqn.2020-01.demo.ceph:mypool, portal: 127.0.0.1,3260] successful.

यदि आपने सब कुछ सही ढंग से किया है, तो सर्वर पर एक नई डिस्क दिखाई देगी, जो SCSI डिवाइस की तरह दिखती है, लेकिन वास्तव में Ceph की एक छवि है, जिसे iSCSI लक्ष्य के माध्यम से एक्सेस किया जाता है। बूट समस्याओं से बचने के लिए, कनेक्टेड डिस्क और पता लगाए गए लक्ष्य को स्थानीय आरंभकर्ता से हटाना बेहतर है:

# iscsiadm -m node --logout # iscsiadm -m discoverydb -o delete -t st -p 127.0.0.1:3260

जो कुछ बचा है वह कॉन्फ़िगरेशन को जारी रखना है ताकि छवि स्वचालित रूप से कनेक्ट हो जाए और, कनेक्शन के बाद, लक्ष्य स्तरीकृत हो जाए। किसी लक्ष्य को लॉन्च करने में दो चरण होते हैं - आरबीडी को जोड़ना और वास्तव में लक्ष्य को लॉन्च करना।

सबसे पहले, आइए होस्ट से आरबीडी छवियों के स्वचालित कनेक्शन को कॉन्फ़िगर करें। यह निम्नलिखित पंक्तियों को /etc/ceph/rbdmap फ़ाइल में जोड़कर किया जाता है:

# cat /etc/ceph/rbdmap # RbdDevice Parameters mypool/myimage id=admin # systemctl enable rbdmap

लक्ष्य कॉन्फ़िगरेशन को पुनर्स्थापित करना थोड़ा अधिक जटिल है - हमें सिस्टमडी के लिए एक इकाई लिखने की आवश्यकता है जो कॉन्फ़िगरेशन को पुनर्स्थापित करेगी:

# cat /usr/lib/systemd/system/scsi-target.service [Unit] Description=Start iSCSI target


After=network-online.target rbdmap.service

Before=remote-fs-pre.target

Wants=network-online.target remote-fs-pre.target
[Service]
Type=oneshot

RemainAfterExit=yes

ExecStart=/bin/targetcli restoreconfig
[Install]
WantedBy=multi-user.target

# systemctl daemon-reload # systemctl enable scsi-target

अंतिम परीक्षण हमारे मॉनिटर को फिर से रीबूट करना है (यह अब एक iSCSI लक्ष्य है)। यह ध्यान दिया जाना चाहिए कि यदि हमने कमांड के साथ आरंभकर्ता के डेटाबेस को साफ़ नहीं किया है iscsiadm -n डिस्कवरीडीबी -o हटाएं... आप एक ऐसे सर्वर के साथ समाप्त हो सकते हैं जो लोड नहीं होता है या लोड होने में लंबा समय लेता है।

क्या बचा है?

सर्वर पर आरंभकर्ता को कॉन्फ़िगर करें जहां हम लक्ष्य भेजना चाहते हैं।

हमारे लक्ष्य की दोष सहनशीलता कैसे सुनिश्चित करें?

आप इसी तरह अन्य मॉनिटरों पर लक्ष्य कॉन्फ़िगर कर सकते हैं और मल्टीपाथ सेट कर सकते हैं (vmware इसे समझेगा और काम भी करेगा, हाइपर-V नहीं समझेगा - इसके लिए SCSI लॉक की आवश्यकता है)। चूंकि कर्नेल से सेफ क्लाइंट कैशिंग का उपयोग नहीं करता है, यह काफी व्यावहारिक है। या दूसरा विकल्प तीन घटकों का एक क्लस्टर संसाधन बनाना है - एक समर्पित लक्ष्य आईपी पता और आरबीडीमैप और एससीएसआई-लक्ष्य सेवाएं, और क्लस्टरिंग टूल के माध्यम से इस संसाधन का प्रबंधन करना (पेसमेकर किसने कहा?)

इसके बजाय एक afterword

जैसा कि स्पष्ट है, यह लेख थोड़ा मज़ाक है - लेकिन इसमें मैंने "जल्दी और उदाहरणों के साथ" एक ही समय में कई काफी लोकप्रिय विषयों पर विचार करने की कोशिश की - iSCSI लक्ष्य, जो जरूरी नहीं कि सेफ छवियों को निर्यात कर सके - लेकिन उदाहरण के लिए, एलवीएम वॉल्यूम निर्यात करें, आईएससीएसआई आरंभकर्ता के साथ काम करने की मूल बातें (लक्ष्य को कैसे स्कैन करें, लक्ष्य से कैसे जुड़ें, डिस्कनेक्ट करें, डेटाबेस से लक्ष्य प्रविष्टि को हटाएं), सिस्टमड और कुछ अन्य के लिए अपनी खुद की इकाई लिखना

मुझे उम्मीद है कि भले ही आप इस पूरे प्रयोग को पूरा नहीं दोहराएंगे, लेकिन कम से कम इस लेख से कुछ न कुछ आपके काम आएगा।

स्रोत: www.habr.com

आईएससीएसआई के माध्यम से सेफ - या झूले में खड़े होकर स्कीइंग करना

इसके बजाय एक afterword

एक टिप्पणी जोड़ें उत्तर रद्द