LINSTOR भण्डारण र OpenNebula सँग यसको एकीकरण

केही समय अघि, LINBIT का केटाहरूले आफ्नो नयाँ SDS समाधान प्रस्तुत गरे - Linstor। यो प्रमाणित प्रविधिहरूमा आधारित पूर्ण रूपमा निःशुल्क भण्डारण हो: DRBD, LVM, ZFS। Linstor सादगी र राम्रोसँग डिजाइन गरिएको वास्तुकला संयोजन गर्दछ, जसले तपाईंलाई स्थिरता र धेरै प्रभावशाली परिणामहरू प्राप्त गर्न अनुमति दिन्छ।

आज म यसको बारेमा थोरै विस्तारमा कुरा गर्न चाहन्छु र यसलाई OpenNebula सँग linstor_un प्रयोग गरेर कती सजिलै संग एकीकृत गर्न सकिन्छ भनेर देखाउन चाहन्छु - एक नयाँ चालक जुन मैले यस उद्देश्यका लागि विशेष रूपमा विकास गरेको छु।

OpenNebula सँग संयोजनमा Linstor ले तपाईंलाई छिटो र भरपर्दो क्लाउड निर्माण गर्न अनुमति दिन्छ जुन तपाईंको आफ्नै पूर्वाधारमा सजिलै प्रयोग गर्न सकिन्छ।

Linstor वास्तुकला

Linstor न त फाइल प्रणाली हो न त ब्लक भण्डारण प्रति se, Linstor एक अर्केस्ट्रेटर हो जसले तपाईंलाई LVM वा ZFS मा भोल्युमहरूको सिर्जनालाई स्वचालित गर्न र DRBD9 प्रयोग गरेर प्रतिलिपि बनाउन अनुमति दिने एब्स्ट्रेक्शन तह प्रदान गर्दछ।

स्टेरियोटाइपहरू तोड्दै

तर पर्खनुहोस्, DRBD? - किन यसलाई स्वचालित र यसले कसरी काम गर्न सक्छ?

विगतको सम्झना गरौं, जब DRBD8 धेरै लोकप्रिय थियो। यसको मानक प्रयोगमा एउटै LVM प्रयोग गरी एउटा ठूलो ब्लक यन्त्र बनाउन र यसलाई धेरै साना टुक्राहरूमा काट्नु समावेश छ। mdadm RAID-1 को एक प्रकार तर नेटवर्क मा प्रतिकृति संग।

यो दृष्टिकोण यसको कमजोरी बिना छैन, र त्यसैले, DRBD9 को आगमन संग, भण्डारण डिजाइन को सिद्धान्तहरु परिवर्तन भएको छ; अब प्रत्येक भर्चुअल मेसिन को लागी एक अलग DRBD यन्त्र सिर्जना गरिएको छ।

स्वतन्त्र ब्लक उपकरणहरूसँगको दृष्टिकोणले क्लस्टरमा ठाउँको राम्रो उपयोगको लागि अनुमति दिन्छ, र थप सुविधाहरूको संख्या पनि थप्छ। उदाहरण को लागी, प्रत्येक यस्तो उपकरण को लागी तपाईले प्रतिकृति संख्या, तिनीहरूको स्थान र व्यक्तिगत सेटिङहरू निर्धारण गर्न सक्नुहुन्छ। तिनीहरू सिर्जना गर्न/मेटाउन, स्न्यापशटहरू लिन, रिसाइज गर्न, इन्क्रिप्शन सक्षम गर्न र धेरै धेरै गर्न सजिलो छन्। यो ध्यान दिन लायक छ कि DRBD9 ले कोरमलाई पनि समर्थन गर्दछ, जसले तपाईंलाई विभाजित मस्तिष्क अवस्थाहरूबाट बच्न अनुमति दिन्छ।

स्रोत र ब्याकइन्डहरू

नयाँ ब्लक उपकरण सिर्जना गर्दा, Linstor ले क्लस्टरमा विभिन्न नोडहरूमा प्रतिकृतिहरूको आवश्यक संख्या राख्छ। हामी त्यस्ता प्रत्येक प्रतिकृतिलाई DRBD स्रोत भन्नेछौं।

त्यहाँ दुई प्रकारका स्रोतहरू छन्:

• डाटा स्रोत — LVM वा ZFS पूलमा नोडमा अवस्थित DRBD यन्त्र हो।
  यस समयमा त्यहाँ धेरै ब्याकएन्डहरूको लागि समर्थन छ र तिनीहरूको संख्या लगातार बढ्दै छ। LVM, ThinLVM र ZFS को लागि समर्थन छ। अन्तिम दुईले तपाईंलाई स्न्यापशटहरू सिर्जना गर्न र प्रयोग गर्न अनुमति दिन्छ।
• डिस्करहित स्रोत — ब्याकइन्ड बिना नोडमा राखिएको DRBD यन्त्र हो, तर यसलाई नियमित ब्लक यन्त्रको रूपमा व्यवहार गर्न अनुमति दिँदै; सबै पढ्ने/लेख्ने कार्यहरू डेटा स्रोतहरूमा पुन: निर्देशित गरिनेछ। डिस्करहित स्रोतहरूको सबैभन्दा नजिकको एनालग iSCSI LUN हो।

प्रत्येक DRBD संसाधनमा 8 प्रतिकृतिहरू हुन सक्छन्, र तिनीहरूमध्ये एउटा मात्र पूर्वनिर्धारित रूपमा सक्रिय हुन सक्छ - प्राथमिक, अरू सबै हुनेछन् माध्यमिक र तिनीहरूको प्रयोग असम्भव हुनेछ जबसम्म त्यहाँ कम्तिमा एक प्राथमिक छ, त्यो हो, तिनीहरूले मात्र डेटा आफैं बीचको नक्कल गर्नेछन्।

प्रणालीमा DRBD उपकरण स्थापना गरेर, यो स्वचालित रूपमा हुन्छ प्राथमिक, यसरी DRBD शब्दावलीमा डिस्करहित स्रोत पनि प्राथमिक हुन सक्छ।

त्यसोभए तपाईलाई किन Linstor चाहिन्छ?

कर्नेलमा सबै संसाधन-गहन कार्यहरू सुम्पेर, Linstor अनिवार्य रूपमा नियमित जाभा अनुप्रयोग हो जसले तपाईंलाई सजिलैसँग DRBD स्रोतहरूको सिर्जनालाई स्वचालित गर्न अनुमति दिन्छ।
यसबाहेक, उहाँद्वारा सिर्जना गरिएको प्रत्येक स्रोत एक स्वतन्त्र DRBD क्लस्टर हुनेछ जसले नियन्त्रण-प्लेन र अन्य DRBD स्रोतहरूको अवस्थालाई ध्यान नदिई स्वतन्त्र रूपमा सञ्चालन गर्दछ।

Linstor मात्र दुई घटक हुन्छन्:

• Linstor-नियन्त्रक - मुख्य नियन्त्रक, जसले स्रोतहरू सिर्जना र व्यवस्थापन गर्न API प्रदान गर्दछ। यसले उपग्रहहरूसँग पनि सञ्चार गर्दछ, तिनीहरूमा खाली ठाउँ जाँच गर्दछ, र नयाँ स्रोतहरू सिर्जना गर्न र मेटाउन कार्यहरू पठाउँदछ। यो एकल उदाहरणमा चल्छ र डाटाबेस प्रयोग गर्दछ, जुन या त आन्तरिक (H2) वा बाह्य (PostgreSQL, MySQL, MariaDB) हुन सक्छ।
• Linstor-उपग्रह — सबै भण्डारण नोडहरूमा स्थापना गरिएको छ र नियन्त्रकलाई खाली ठाउँको बारेमा जानकारी प्रदान गर्दछ, र तिनीहरूको शीर्षमा नयाँ भोल्युमहरू र DRBD उपकरणहरू सिर्जना गर्न र मेटाउन नियन्त्रकबाट प्राप्त कार्यहरू पनि गर्दछ।

Linstor निम्न मुख्य अवधारणाहरु संग संचालित:

• नोड - एक भौतिक सर्भर जसमा DRBD स्रोतहरू सिर्जना र प्रयोग गरिनेछ।
• भण्डारण पोखरी — LVM वा ZFS पूल नोडमा सिर्जना गरिएको छ जसमा DRBD स्रोतहरू अवस्थित हुनेछन्। डिस्क रहित पोखरी पनि सम्भव छ - यो एउटा पोखरी हो जसमा केवल डिस्करहित स्रोतहरू अवस्थित हुनेछन्।
• स्रोत परिभाषा - स्रोतको परिभाषा अनिवार्य रूपमा एक प्रोटोटाइप हो जसले नाम र यसको सबै गुणहरू वर्णन गर्दछ।
• भोल्युम परिभाषा - मात्रा परिभाषा। प्रत्येक स्रोतमा धेरै भोल्युमहरू समावेश हुन सक्छन्, प्रत्येक भोल्युमको आकार हुनुपर्छ।
• स्रोत — ब्लक यन्त्रको सिर्जना गरिएको उदाहरण, प्रत्येक स्रोतलाई निश्चित नोडमा र केही भण्डारण पूलमा राखिएको हुनुपर्छ।

Linstor स्थापना

म प्रणालीको रूपमा Ubuntu प्रयोग गर्न सिफारिस गर्दछु, किनभने ... उनको लागि अवस्थित छ तयार PPA:

add-apt-repository ppa:linbit/linbit-drbd9-stack
apt-get update

वा डेबियन, जहाँ Linstor Proxmox को लागि आधिकारिक भण्डारबाट स्थापना गर्न सकिन्छ:

wget -O- https://packages.linbit.com/package-signing-pubkey.asc | apt-key add -
PVERS=5 && echo "deb http://packages.linbit.com/proxmox/ proxmox-$PVERS drbd-9.0" > 
    /etc/apt/sources.list.d/linbit.list
apt-get update

नियन्त्रक

यहाँ सबै कुरा सरल छ:

apt-get install linstor-controller linstor-client
systemctl enable linstor-controller
systemctl start linstor-controller

भण्डारण नोडहरू

लिनक्स कर्नेल हाल इन-ट्री कर्नेल मोड्युलको साथ पठाउँछ DRBD8, दुर्भाग्यवश यो हामीलाई उपयुक्त छैन र हामीले स्थापना गर्न आवश्यक छ DRBD9:

apt-get install drbd-dkms

अभ्यासले देखाएको रूपमा, धेरैजसो कठिनाइहरू ठ्याक्कै उत्पन्न हुन्छन् किनभने DRBD8 मोड्युल प्रणालीमा लोड हुन्छ, र DRBD9 होइन। सौभाग्य देखि, यो चलाएर जाँच गर्न सजिलो छ:

modprobe drbd
cat /proc/drbd

देख्नुभयो भने संस्करण: ०.०.। - यसको मतलब सबै ठीक छ भने संस्करण: ०.०.। - यसको मतलब केहि गडबड भयो र तपाईंले कारणहरू पत्ता लगाउन थप कदमहरू चाल्न आवश्यक छ।

अब स्थापना गरौं linstor-उपग्रह и drbd-utils:

apt-get install linstor-satellite drbd-utils
systemctl enable linstor-satellite
systemctl start linstor-satellite

क्लस्टर बनाउनुहोस्

भण्डारण पोखरी र नोडहरू

ब्याकएन्डको रूपमा हामी लिनेछौं ThinLVM, किनभने यो सरल छ र स्न्यापशट समर्थन गर्दछ।
सेट LVM2, यदि तपाईंले पहिले नै त्यसो गर्नुभएको छैन भने, हाम्रा सबै भण्डारण नोडहरूमा ThinLVM पूल सिर्जना गरौं:

sudo vgcreate drbdpool /dev/sdb
sudo lvcreate -L 800G -T drbdpool/thinpool

सबै थप कार्यहरू सीधा नियन्त्रक मा प्रदर्शन गर्न सकिन्छ:

हाम्रो नोडहरू थपौं:

linstor node create node1 127.0.0.11
linstor node create node2 127.0.0.12
linstor node create node3 127.0.0.13

भण्डारण पोखरीहरू सिर्जना गरौं:

linstor storage-pool create lvmthin node1 data drbdpool/thinpool
linstor storage-pool create lvmthin node2 data drbdpool/thinpool
linstor storage-pool create lvmthin node3 data drbdpool/thinpool

अब बनाइएको पूलहरू जाँच गरौं:

linstor storage-pool list

यदि सबै कुरा सही तरिकाले गरिएको छ भने, हामीले केहि देख्नुपर्छ:

+------------------------------------------------ -------------------------------------------------- ----+ | भण्डारणपुल | नोड | चालक | पूल नाम | नि:शुल्क क्षमता | कुल क्षमता | स्न्यापशटहरू समर्थन गर्दछ | |------------------------------------------------ ------------------------------------------------------------------ ---| | डाटा | node1 | LVM_THIN | drbdpool/thinpool | 64 GiB | 64 GiB | सत्य | | डाटा | node2 | LVM_THIN | drbdpool/thinpool | 64 GiB | 64 GiB | सत्य | | डाटा | node3 | LVM_THIN | drbdpool/thinpool | 64 GiB | 64 GiB | सत्य | +------------------------------------------------ -------------------------------------------------- ----+

DRBD स्रोतहरू

अब हाम्रो नयाँ DRBD स्रोत सिर्जना गर्ने प्रयास गरौं:

linstor resource-definition create myres
linstor volume-definition create myres 1G
linstor resource create myres --auto-place 2

सिर्जना गरिएका स्रोतहरू जाँच गरौं:

linstor resource list 

+------------------------------------------------ -------------------------------------------------- ---+ | नोड | स्रोत | भण्डारणपुल | भोल्यूम एनआर | माइनरएनआर | उपकरणनाम | आवंटित | प्रयोगमा | राज्य | |------------------------------------------------ ------------------------------------------------------------------ --| | node1 | myres | डाटा | ० | 0 | /dev/drbd1084 | ५२ KiB | प्रयोग नगरिएको | UpToDate | | node1084 | myres | डाटा | ० | 52 | /dev/drbd2 | ५२ KiB | प्रयोग नगरिएको | UpToDate | +------------------------------------------------ -------------------------------------------------- ---+

महान! - हामीले पहिलो दुई नोडहरूमा स्रोत सिर्जना गरिएको देख्यौं, हामी तेस्रोमा डिस्करहित स्रोत सिर्जना गर्ने प्रयास गर्न सक्छौं:

linstor resource create --diskless node3 myres

नोडहरूमा तपाईंले सधैं यस यन्त्रको रूपमा फेला पार्नुहुनेछ /dev/drbd1084 वा /dev/drbd/by-res/myres/0

यो कसरी Linstor काम गर्दछ, तपाईं थप जानकारी प्राप्त गर्न सक्नुहुन्छ आधिकारिक दस्तावेज.

अब म यसलाई OpenNebula सँग कसरी एकीकृत गर्ने भनेर बताउनेछु

OpenNebula सेटअप गर्दै

म ओपननेबुला सेटअप प्रक्रियामा धेरै गहिरो जानेछैन, किनभने... सबै चरणहरू विस्तृत रूपमा वर्णन गरिएको छ आधिकारिक दस्तावेज, जुन म तपाईंलाई सम्पर्क गर्न सिफारिस गर्छु, म तपाईंलाई Linstor सँग OpenNebula को एकीकरणको बारेमा मात्र बताउनेछु।

linstor_un

यो समस्या समाधान गर्न मैले आफ्नै ड्राइभरलाई लेखे - linstor_un, यो हाल प्लगइनको रूपमा उपलब्ध छ र छुट्टै स्थापना हुनुपर्छ।

सम्पूर्ण स्थापना फ्रन्टएन्ड ओपननेबुला नोडहरूमा गरिन्छ र गणना नोडहरूमा थप कार्यहरू आवश्यक पर्दैन।

सबै भन्दा पहिले, हामीले सुनिश्चित गर्न आवश्यक छ कि हामीसँग छ jq и linstor-ग्राहक:

apt-get install jq linstor-client

टोली linstor node list नोडहरूको सूची प्रदर्शन गर्नुपर्छ। सबै OpenNebula कम्प्युट नोडहरू Linstor क्लस्टरमा थपिनुपर्छ।

प्लगइन डाउनलोड र स्थापना गर्नुहोस्:

curl -L https://github.com/OpenNebula/addon-linstor_un/archive/master.tar.gz | tar -xzvf - -C /tmp

mv /tmp/addon-linstor_un-master/vmm/kvm/* /var/lib/one/remotes/vmm/kvm/

mkdir -p /var/lib/one/remotes/etc/datastore/linstor_un
mv /tmp/addon-linstor_un-master/datastore/linstor_un/linstor_un.conf /var/lib/one/remotes/etc/datastore/linstor_un/linstor_un.conf

mv /tmp/addon-linstor_un-master/datastore/linstor_un /var/lib/one/remotes/datastore/linstor_un
mv /tmp/addon-linstor_un-master/tm/linstor_un /var/lib/one/remotes/tm/linstor_un

rm -rf /tmp/addon-linstor_un-master

अब हामीले यसलाई OpenNebula कन्फिगरेसनमा थप्न आवश्यक छ, यो गर्नका लागि हामी वर्णन गरिएका सरल चरणहरू पालना गर्छौं यहाँ.

त्यसपछि OpenNebula पुन: सुरु गर्नुहोस्:

systemctl restart opennebula

र हाम्रो डाटास्टोरहरू, प्रणाली थप्नुहोस्:

cat > system-ds.conf <<EOT
NAME="linstor-system"
TYPE="SYSTEM_DS"
STORAGE_POOL="data"
AUTO_PLACE="2"
CLONE_MODE="snapshot"
CHECKPOINT_AUTO_PLACE="1"
BRIDGE_LIST="node1 node2 node3"
TM_MAD="linstor_un"
EOT

onedatastore create system-ds.conf

र छवि स्टोर:

cat > images-ds.conf <<EOT
NAME="linstor-images"
TYPE="IMAGE_DS"
STORAGE_POOL="data"
AUTO_PLACE="2"
BRIDGE_LIST="node1 node2 node3"
DISK_TYPE="BLOCK"
DS_MAD="linstor_un"
TM_MAD="linstor_un"
EOT

onedatastore create images-ds.conf

• परिमिति AUTO_PLACE OpenNebula मा प्रत्येक नयाँ छविको लागि सिर्जना गरिने डेटा प्रतिकृतिहरूको संख्या देखाउँछ।
• परिमिति CLONE_MODE नयाँ भर्चुअल मेशिनहरू सिर्जना गर्दा छविहरू कसरी क्लोन गरिनेछ भनेर ठ्याक्कै संकेत गर्दछ, snapshot - छविको स्न्यापसट सिर्जना गर्नेछ र स्न्यापसटबाट भर्चुअल मेसिन तैनात गर्नेछ, copy - प्रत्येक भर्चुअल मेसिनको लागि छविको पूर्ण प्रतिलिपि बनाउनेछ।
• В BRIDGE_LIST छवि क्लोनिङ सञ्चालन गर्न प्रयोग गरिने सबै नोडहरू निर्दिष्ट गर्न सिफारिस गरिन्छ।

समर्थित प्यारामिटरहरूको पूर्ण सूचीको लागि, हेर्नुहोस् पढ्नुहोस् परियोजना।

यसले सेटअप पूरा गर्दछ, अब तपाइँ आधिकारिकबाट केही उपकरण डाउनलोड गर्न सक्नुहुन्छ ओपननेबुला मार्केटप्लेस र त्यसबाट भर्चुअल मेसिनहरू सिर्जना गर्नुहोस्।

परियोजना लिङ्क:
https://github.com/OpenNebula/addon-linstor_un

स्रोत: www.habr.com