LINSTOR સ્ટોરેજ અને ઓપનનેબુલા સાથે તેનું એકીકરણ

આટલા લાંબા સમય પહેલા, LINBIT ના લોકોએ તેમનું નવું SDS સોલ્યુશન રજૂ કર્યું - Linstor. આ સાબિત તકનીકો પર આધારિત સંપૂર્ણપણે મફત સ્ટોરેજ છે: DRBD, LVM, ZFS. Linstor સરળતા અને સારી રીતે ડિઝાઇન કરેલ આર્કિટેક્ચરને જોડે છે, જે તમને સ્થિરતા અને તદ્દન પ્રભાવશાળી પરિણામો પ્રાપ્ત કરવા દે છે.

આજે હું તેના વિશે થોડી વધુ વાત કરવા માંગુ છું અને linstor_un નો ઉપયોગ કરીને તેને OpenNebula સાથે કેટલું સરળ રીતે સંકલિત કરી શકાય છે તે બતાવવા માંગુ છું - એક નવો ડ્રાઇવર જે મેં આ હેતુ માટે ખાસ વિકસાવ્યો છે.

OpenNebula સાથે મળીને Linstor તમને ઝડપી અને ભરોસાપાત્ર ક્લાઉડ બનાવવાની મંજૂરી આપે છે જે તમારા પોતાના ઈન્ફ્રાસ્ટ્રક્ચર પર સરળતાથી ગોઠવી શકાય છે.

લિન્સ્ટોર આર્કિટેક્ચર

Linstor એ ન તો ફાઇલ સિસ્ટમ છે કે ન તો બ્લોક સ્ટોરેજ છે, Linstor એ એક ઓર્કેસ્ટ્રેટર છે જે LVM અથવા ZFS માં વોલ્યુમોની રચનાને સ્વચાલિત કરવા અને DRBD9 નો ઉપયોગ કરીને તેમની નકલ કરવા માટે એબ્સ્ટ્રેક્શન લેયર પ્રદાન કરે છે.

સ્ટીરિયોટાઇપ્સ તોડી રહ્યા છે

પણ રાહ જુઓ, DRBD? - શા માટે તેને સ્વચાલિત કરો અને તે કેવી રીતે કાર્ય કરી શકે?

ચાલો ભૂતકાળને યાદ કરીએ જ્યારે DRBD8 ખૂબ જ લોકપ્રિય હતું. તેના પ્રમાણભૂત ઉપયોગનો અર્થ એ છે કે એક જ LVM નો ઉપયોગ કરીને એક મોટું બ્લોક ઉપકરણ બનાવવું અને તેને ઘણા નાના ટુકડાઓમાં કાપવું. mdadm RAID-1 નો એક પ્રકાર પરંતુ નેટવર્ક પ્રતિકૃતિ સાથે.

આ અભિગમ ખામીઓ વગરનો નથી, અને તેથી, DRBD9 ના આગમન સાથે, સંગ્રહ બાંધકામના સિદ્ધાંતો બદલાઈ ગયા છે, હવે દરેક વર્ચ્યુઅલ મશીન માટે એક અલગ DRBD ઉપકરણ બનાવવામાં આવ્યું છે.

સ્વતંત્ર બ્લોક ઉપકરણ અભિગમ ક્લસ્ટરમાં જગ્યાનો બહેતર ઉપયોગ કરવાની મંજૂરી આપે છે, અને સંખ્યાબંધ વધારાની સુવિધાઓ પણ ઉમેરે છે. ઉદાહરણ તરીકે, આવા દરેક ઉપકરણ માટે, તમે પ્રતિકૃતિઓની સંખ્યા, તેમનું સ્થાન અને વ્યક્તિગત સેટિંગ્સ નક્કી કરી શકો છો. તે બનાવવા/ડીલીટ કરવા, સ્નેપશોટ લેવા, માપ બદલવા, એન્ક્રિપ્શન સક્ષમ કરવા અને વધુ કરવા માટે સરળ છે. તે નોંધવું યોગ્ય છે કે DRBD9 કોરમ પણ જાળવી રાખે છે, જે વિભાજીત-મગજની પરિસ્થિતિઓને ટાળે છે.

સંસાધનો અને બેકએન્ડ

નવું બ્લોક ઉપકરણ બનાવતી વખતે, Linstor ક્લસ્ટરમાં વિવિધ નોડ્સ પર જરૂરી સંખ્યામાં પ્રતિકૃતિઓ મૂકે છે. અમે આવી દરેક પ્રતિકૃતિને DRBD સંસાધન કહીશું.

સંસાધનો બે પ્રકારના હોય છે:

• ડેટા સંસાધન - LVM અથવા ZFS પૂલમાં નોડ પર સ્થિત DRBD ઉપકરણનું પ્રતિનિધિત્વ કરો.
  આ ક્ષણે ઘણા બેકએન્ડ માટે સપોર્ટ છે અને તેમની સંખ્યા સતત વધી રહી છે. LVM, ThinLVM અને ZFS માટે સપોર્ટ છે. છેલ્લા બે તમને સ્નેપશોટ બનાવવા અને ઉપયોગ કરવાની મંજૂરી આપે છે.
• ડિસ્ક રહિત સંસાધન - એક DRBD ઉપકરણ છે જે બેકએન્ડ વિના નોડ પર હોસ્ટ કરેલું છે, પરંતુ તેને નિયમિત બ્લોક ઉપકરણની જેમ ગણવામાં આવે છે, તમામ વાંચન/રાઇટિંગ ઑપરેશન્સને ડેટા સ્રોતો પર રીડાયરેક્ટ કરવામાં આવશે. ડિસ્કલેસ સ્ત્રોતો માટે સૌથી નજીકનું એનાલોગ iSCSI LUN છે.

દરેક DRBD સંસાધનમાં 8 પ્રતિકૃતિઓ હોઈ શકે છે અને તેમાંથી માત્ર એક જ મૂળભૂત રીતે સક્રિય હોઈ શકે છે - પ્રાથમિક, બીજા બધા હશે માધ્યમિક અને જ્યાં સુધી ઓછામાં ઓછું એક પ્રાથમિક હોય ત્યાં સુધી તેમનો ઉપયોગ અશક્ય હશે, એટલે કે, તેઓ ફક્ત પોતાની વચ્ચે ડેટાની નકલ કરશે.

સિસ્ટમમાં DRBD ઉપકરણને માઉન્ટ કરવાથી, તે આપમેળે બની જાય છે પ્રાથમિક, આમ ડીઆરબીડી પરિભાષામાં ડિસ્કલેસ સ્ત્રોત પણ પ્રાથમિક હોઈ શકે છે.

તો શા માટે આપણે લિન્સ્ટરની જરૂર છે?

કર્નલને તમામ સંસાધન-સઘન કાર્યો સોંપીને, Linstor એ અનિવાર્યપણે નિયમિત જાવા એપ્લિકેશન છે જે તમને DRBD સંસાધનોની રચનાને સરળતાથી સ્વચાલિત કરવાની મંજૂરી આપે છે.
તે જ સમયે, તેમના દ્વારા બનાવેલ દરેક સંસાધન એક સ્વતંત્ર DRBD ક્લસ્ટર હશે જે નિયંત્રણ-પ્લેન અને અન્ય DRBD સંસાધનોની સ્થિતિને ધ્યાનમાં લીધા વિના સ્વતંત્ર રીતે કાર્ય કરે છે.

Linstor માત્ર બે ઘટકો સમાવે છે:

• linstor-નિયંત્રક - મુખ્ય નિયંત્રક, જે સંસાધનો બનાવવા અને મેનેજ કરવા માટે API પ્રદાન કરે છે. તે ઉપગ્રહો સાથે પણ વાતચીત કરે છે, તેમના પર ખાલી જગ્યા તપાસે છે અને નવા સંસાધનો બનાવવા અને કાઢી નાખવા માટે નોકરીઓ મોકલે છે. એક જ ઉદાહરણમાં ચાલે છે અને ડેટાબેઝનો ઉપયોગ કરે છે જે કાં તો આંતરિક (H2) અથવા બાહ્ય (PostgreSQL, MySQL, MariaDB) હોઈ શકે છે.
• linstor-ઉપગ્રહ — બધા સ્ટોરેજ ગાંઠો પર ઇન્સ્ટોલ કરેલું છે અને નિયંત્રકને ખાલી જગ્યા વિશેની માહિતી પ્રદાન કરે છે, અને તેની ટોચ પર નવા વોલ્યુમો અને DRBD ઉપકરણો બનાવવા અને કાઢી નાખવા માટે નિયંત્રક પાસેથી પ્રાપ્ત કાર્યો પણ કરે છે.

લિન્સ્ટર નીચેના મુખ્ય ખ્યાલો સાથે કાર્ય કરે છે:

• નોડ — એક ભૌતિક સર્વર કે જેના પર DRBD સંસાધનો બનાવવામાં આવશે અને ઉપયોગમાં લેવાશે.
• સંગ્રહ પૂલ - નોડ પર બનાવેલ LVM અથવા ZFS પૂલ જેમાં DRBD સંસાધનો મૂકવામાં આવશે. ડિસ્કલેસ પૂલ પણ શક્ય છે - આ એક પૂલ છે જેમાં ફક્ત ડિસ્કલેસ સંસાધનો મૂકવામાં આવશે.
• સંસાધન વ્યાખ્યા - સંસાધનની વ્યાખ્યા, હકીકતમાં તે એક પ્રોટોટાઇપ છે જે નામ અને તેના તમામ ગુણધર્મોનું વર્ણન કરે છે.
• વોલ્યુમ વ્યાખ્યા - વોલ્યુમ વ્યાખ્યા. દરેક સંસાધનમાં અનેક વોલ્યુમો હોઈ શકે છે, દરેક વોલ્યુમનું કદ હોવું આવશ્યક છે.
• રિસોર્સ - બ્લોક ઉપકરણનો દાખલો બનાવ્યો, દરેક સંસાધન ચોક્કસ નોડ પર અને અમુક સ્ટોરેજ પૂલમાં મૂકાયેલ હોવું જ જોઈએ.

Linstor સ્થાપન

હું સિસ્ટમ તરીકે ઉબુન્ટુનો ઉપયોગ કરવાની ભલામણ કરું છું, કારણ કે... તેના માટે અસ્તિત્વમાં છે તૈયાર PPA:

add-apt-repository ppa:linbit/linbit-drbd9-stack
apt-get update

અથવા ડેબિયન, જ્યાં લિન્સ્ટરને સત્તાવાર પ્રોક્સમોક્સ રિપોઝીટરીમાંથી ઇન્સ્ટોલ કરી શકાય છે:

wget -O- https://packages.linbit.com/package-signing-pubkey.asc | apt-key add -
PVERS=5 && echo "deb http://packages.linbit.com/proxmox/ proxmox-$PVERS drbd-9.0" > 
    /etc/apt/sources.list.d/linbit.list
apt-get update

નિયંત્રક

અહીં બધું સરળ છે:

apt-get install linstor-controller linstor-client
systemctl enable linstor-controller
systemctl start linstor-controller

સંગ્રહ ગાંઠો

Linux કર્નલ હાલમાં ઇન-ટ્રી કર્નલ મોડ્યુલ સાથે મોકલે છે DRBD8, કમનસીબે તે અમને અનુકૂળ નથી અને અમારે ઇન્સ્ટોલ કરવાની જરૂર છે DRBD9:

apt-get install drbd-dkms

પ્રેક્ટિસ બતાવે છે તેમ, મોટાભાગની મુશ્કેલીઓ ચોક્કસપણે ઊભી થાય છે કારણ કે DRBD8 મોડ્યુલ સિસ્ટમમાં લોડ થયેલ છે, અને DRBD9 નહીં. સદનસીબે, આ ચલાવીને તપાસવું સરળ છે:

modprobe drbd
cat /proc/drbd

જો તમે જુઓ સંસ્કરણ: 9 - જો બધું સારું છે સંસ્કરણ: 8 - તેનો અર્થ એ છે કે કંઈક ખોટું થયું છે અને તમારે કારણો શોધવા માટે વધારાના પગલાં લેવાની જરૂર છે.

હવે ઇન્સ્ટોલ કરીએ linstor-ઉપગ્રહ и drbd-utils:

apt-get install linstor-satellite drbd-utils
systemctl enable linstor-satellite
systemctl start linstor-satellite

એક ક્લસ્ટર બનાવો

સંગ્રહ પુલ અને ગાંઠો

બેકએન્ડ તરીકે આપણે લઈશું થિનએલવીએમ, કારણ કે તે સૌથી સરળ છે અને સ્નેપશોટને સપોર્ટ કરે છે.
સેટ કરો lvm2, જો તમે પહેલાથી આવું ન કર્યું હોય, અને ચાલો અમારા બધા સ્ટોરેજ નોડ્સ પર ThinLVM પૂલ બનાવીએ:

sudo vgcreate drbdpool /dev/sdb
sudo lvcreate -L 800G -T drbdpool/thinpool

આગળની બધી ક્રિયાઓ સીધી નિયંત્રક પર કરી શકાય છે:

ચાલો આપણા નોડ્સ ઉમેરીએ:

linstor node create node1 127.0.0.11
linstor node create node2 127.0.0.12
linstor node create node3 127.0.0.13

ચાલો સ્ટોરેજ પૂલ બનાવીએ:

linstor storage-pool create lvmthin node1 data drbdpool/thinpool
linstor storage-pool create lvmthin node2 data drbdpool/thinpool
linstor storage-pool create lvmthin node3 data drbdpool/thinpool

ચાલો હવે બનાવેલ પૂલ તપાસીએ:

linstor storage-pool list

જો બધું યોગ્ય રીતે કરવામાં આવે છે, તો આપણે કંઈક આના જેવું જોવું જોઈએ:

+---------------------------------------------------------------- -------------------------------------------------- ----+ | સ્ટોરેજપૂલ | નોડ | ડ્રાઈવર | પૂલનું નામ | ફ્રી કેપેસિટી | કુલ ક્ષમતા | સ્નેપશોટને સપોર્ટ કરે છે | |------------------------------------------------ -------------------------------------------------- ----| | ડેટા | નોડ1 | LVM_THIN | drbdpool/thinpool | 64 GiB | 64 GiB | સાચું | | ડેટા | node2 | LVM_THIN | drbdpool/thinpool | 64 GiB | 64 GiB | સાચું | | ડેટા | node3 | LVM_THIN | drbdpool/thinpool | 64 GiB | 64 GiB | સાચું | +---------------------------------------------------------------- -------------------------------------------------- ----+

DRBD સંસાધનો

હવે ચાલો અમારું નવું DRBD સંસાધન બનાવવાનો પ્રયાસ કરીએ:

linstor resource-definition create myres
linstor volume-definition create myres 1G
linstor resource create myres --auto-place 2

ચાલો બનાવેલા સંસાધનો તપાસીએ:

linstor resource list 

+---------------------------------------------------------------- -------------------------------------------------- ---+ | નોડ | સંસાધન | સ્ટોરેજપૂલ | વોલ્યુમNr | MinorNr | ઉપકરણનું નામ | ફાળવેલ | ઉપયોગમાં | રાજ્ય | |------------------------------------------------ -------------------------------------------------- ---| | નોડ1 | myres | ડેટા | 0 | 1084 | /dev/drbd1084 | 52 KiB | નહિ વપરાયેલ | UpToDate | | node2 | myres | ડેટા | 0 | 1084 | /dev/drbd1084 | 52 KiB | નહિ વપરાયેલ | UpToDate | +---------------------------------------------------------------- -------------------------------------------------- ---+

મહાન! - આપણે જોઈએ છીએ કે સંસાધન પ્રથમ બે નોડ્સ પર બનાવવામાં આવ્યું હતું, અમે ત્રીજા પર ડિસ્કલેસ સંસાધન બનાવવાનો પણ પ્રયાસ કરી શકીએ છીએ:

linstor resource create --diskless node3 myres

નોડ્સ પર તમને હંમેશા આ ઉપકરણ તરીકે મળશે /dev/drbd1084 અથવા /dev/drbd/by-res/myres/0

આ રીતે Linstor કામ કરે છે, તમે વધુ માહિતી મેળવી શકો છો સત્તાવાર દસ્તાવેજીકરણ.

હવે હું તેને OpenNebula સાથે કેવી રીતે એકીકૃત કરવું તે વિશે વાત કરીશ

OpenNebula સેટ કરી રહ્યું છે

હું ઓપનનેબ્યુલા સેટઅપ પ્રક્રિયામાં વધુ ઊંડો જઈશ નહીં, કારણ કે બધા પગલાં વિગતવાર છે સત્તાવાર દસ્તાવેજીકરણ, જેનો હું તમને સંદર્ભ લેવાની ભલામણ કરું છું, હું ફક્ત Linstor સાથે OpenNebula ના એકીકરણ વિશે વાત કરીશ.

linstor_un

આ સમસ્યાને ઉકેલવા માટે, મેં મારા પોતાના ડ્રાઇવરને લખ્યું - linstor_un, તે હાલમાં પ્લગઇન તરીકે ઉપલબ્ધ છે અને અલગથી ઇન્સ્ટોલ કરવું આવશ્યક છે.

સમગ્ર ઇન્સ્ટોલેશન ફ્રન્ટએન્ડ ઓપનનેબ્યુલા નોડ્સ પર હાથ ધરવામાં આવે છે અને તેને કમ્પ્યુટ નોડ્સ પર વધારાની ક્રિયાઓની જરૂર નથી.

સૌ પ્રથમ, આપણે ખાતરી કરવાની જરૂર છે કે આપણી પાસે છે jq и linstor-ક્લાયન્ટ:

apt-get install jq linstor-client

ટીમ linstor node list નોડ્સની સૂચિ દર્શાવવી જોઈએ. બધા ઓપનનેબ્યુલા કમ્પ્યુટ નોડ્સ લિન્સ્ટર ક્લસ્ટરમાં ઉમેરવા જોઈએ.

પ્લગઇન ડાઉનલોડ કરો અને ઇન્સ્ટોલ કરો:

curl -L https://github.com/OpenNebula/addon-linstor_un/archive/master.tar.gz | tar -xzvf - -C /tmp

mv /tmp/addon-linstor_un-master/vmm/kvm/* /var/lib/one/remotes/vmm/kvm/

mkdir -p /var/lib/one/remotes/etc/datastore/linstor_un
mv /tmp/addon-linstor_un-master/datastore/linstor_un/linstor_un.conf /var/lib/one/remotes/etc/datastore/linstor_un/linstor_un.conf

mv /tmp/addon-linstor_un-master/datastore/linstor_un /var/lib/one/remotes/datastore/linstor_un
mv /tmp/addon-linstor_un-master/tm/linstor_un /var/lib/one/remotes/tm/linstor_un

rm -rf /tmp/addon-linstor_un-master

હવે આપણે તેને OpenNebula રૂપરેખામાં ઉમેરવાની જરૂર છે, આ માટે આપણે વર્ણવેલ સરળ પગલાંને અનુસરીએ છીએ અહીં.

પછી OpenNebula પુનઃપ્રારંભ કરો:

systemctl restart opennebula

અને અમારા ડેટાસ્ટોર્સ, સિસ્ટમ ઉમેરો:

cat > system-ds.conf <<EOT
NAME="linstor-system"
TYPE="SYSTEM_DS"
STORAGE_POOL="data"
AUTO_PLACE="2"
CLONE_MODE="snapshot"
CHECKPOINT_AUTO_PLACE="1"
BRIDGE_LIST="node1 node2 node3"
TM_MAD="linstor_un"
EOT

onedatastore create system-ds.conf

અને છબી સ્ટોર:

cat > images-ds.conf <<EOT
NAME="linstor-images"
TYPE="IMAGE_DS"
STORAGE_POOL="data"
AUTO_PLACE="2"
BRIDGE_LIST="node1 node2 node3"
DISK_TYPE="BLOCK"
DS_MAD="linstor_un"
TM_MAD="linstor_un"
EOT

onedatastore create images-ds.conf

• પેરામીટર AUTO_PLACE OpenNebula માં દરેક નવી ઈમેજ માટે બનાવવામાં આવનાર ડેટા પ્રતિકૃતિઓની સંખ્યા દર્શાવે છે.
• પેરામીટર CLONE_MODE નવી વર્ચ્યુઅલ મશીનો બનાવતી વખતે ઈમેજો કેવી રીતે ક્લોન કરવામાં આવશે તે બરાબર સૂચવે છે, snapshot - ઇમેજનો સ્નેપશોટ બનાવશે અને સ્નેપશોટમાંથી વર્ચ્યુઅલ મશીન જમાવશે, copy - દરેક વર્ચ્યુઅલ મશીન માટે ઇમેજની સંપૂર્ણ નકલ બનાવશે.
• В BRIDGE_LIST ઇમેજ ક્લોનિંગ કામગીરી કરવા માટે ઉપયોગમાં લેવાતા તમામ નોડ્સનો ઉલ્લેખ કરવાની ભલામણ કરવામાં આવે છે.

સમર્થિત વિકલ્પોની સંપૂર્ણ સૂચિ માટે, જુઓ README પ્રોજેક્ટ

આ સેટઅપ પૂર્ણ કરે છે, હવે તમે અધિકારી પાસેથી કેટલાક ઉપકરણ ડાઉનલોડ કરી શકો છો ઓપનનેબુલા માર્કેટપ્લેસ અને તેમાંથી વર્ચ્યુઅલ મશીનો બનાવો.

પ્રોજેક્ટ લિંક:
https://github.com/OpenNebula/addon-linstor_un

સોર્સ: www.habr.com