રુક - કુબરનેટ્સ માટે સ્વ-સેવા ડેટા સ્ટોર

29 જાન્યુઆરીના રોજ, CNCF (ક્લાઉડ નેટિવ કમ્પ્યુટિંગ ફાઉન્ડેશન)ની ટેકનિકલ કમિટી, કુબરનેટસ, પ્રોમિથિયસ અને અન્ય ઓપન સોર્સ ઉત્પાદનોની દુનિયાના કન્ટેનર અને ક્લાઉડ નેટિવ પાછળની સંસ્થા, જાહેરાત કરી પ્રોજેક્ટની સ્વીકૃતિ વિશે રૂક તેમની હરોળમાં. આ "કુબરનેટ્સમાં વિતરિત સ્ટોરેજ ઓર્કેસ્ટ્રેટર" ને જાણવાની ઉત્તમ તક.

કેવા પ્રકારનું રુક?

રૂક ગોમાં લખાયેલ સોફ્ટવેર છે (દ્વારા વિતરિત ફ્રી અપાચે લાયસન્સ 2.0 હેઠળ), ડેટા વેરહાઉસને સ્વચાલિત કાર્યો સાથે પ્રદાન કરવા માટે રચાયેલ છે જે તેમને બનાવે છે સ્વ-વ્યવસ્થાપન, સ્વ-સ્કેલિંગ અને સ્વ-હીલિંગ. આ કરવા માટે, રુક સ્વચાલિત થાય છે (કુબરનેટ્સ પર્યાવરણમાં ઉપયોગમાં લેવાતા ડેટા સ્ટોર્સ માટે): જમાવટ, બુટસ્ટ્રેપિંગ, ગોઠવણી, જોગવાઈ, સ્કેલિંગ, અપડેટ્સ, સ્થળાંતર, ડિઝાસ્ટર રિકવરી, મોનિટરિંગ અને સંસાધન સંચાલન.

આ પ્રોજેક્ટ આલ્ફા સ્ટેજમાં છે અને કુબરનેટ્સ ક્લસ્ટર્સમાં સેફ ડિસ્ટ્રિબ્યુટેડ સ્ટોરેજ સિસ્ટમને ગોઠવવામાં નિષ્ણાત છે. લેખકો અન્ય સ્ટોરેજ સિસ્ટમ્સને ટેકો આપવાની યોજનાઓની પણ જાહેરાત કરે છે, પરંતુ આ આગામી પ્રકાશનોમાં થશે નહીં.

ઘટકો અને તકનીકી ઉપકરણ

કુબરનેટીસની અંદર રુકનું કામ ખાસ ઓપરેટર પર આધારિત છે (અમે કુબરનેટ્સ ઓપરેટર્સ વિશે વધુ લખ્યું છે આ લેખ), જે સ્ટોરેજ રૂપરેખાંકનને સ્વચાલિત કરે છે અને તેનું મોનિટરિંગ લાગુ કરે છે.

અને તેથી, રુક ઓપરેટર એવું લાગે છે કે એક કન્ટેનર છે જેમાં જમાવટ અને રીપોઝીટરીના અનુગામી જાળવણી માટે જરૂરી બધું સમાવે છે. ઑપરેટરની જવાબદારીઓમાં શામેલ છે:

• Ceph સ્ટોરેજ ડિમન માટે ડેમનસેટ બનાવવું (ceph-osd) સરળ RADOS ક્લસ્ટર સાથે;
• Ceph મોનીટરીંગ માટે શીંગો બનાવવા (સાથે ceph-mon, ક્લસ્ટરની સ્થિતિ તપાસી રહ્યું છે; કોરમ માટે, મોટા ભાગના કિસ્સાઓમાં ત્રણ નકલો જમાવવામાં આવે છે, અને જો તેમાંથી કોઈ ઘટે છે, તો એક નવી વધે છે);
• સીઆરડીનું સંચાલન (કસ્ટમ સંસાધન વ્યાખ્યાઓ) પોતાના માટે ક્લસ્ટર, સંગ્રહ પુલ, ઑબ્જેક્ટ સ્ટોર્સ (એચટીટીપી વિનંતીઓને સેવા આપવા માટેના સંસાધનો અને સેવાઓનો સમૂહ જે ઑબ્જેક્ટ પર PUT/GET કરે છે - તે S3 અને Swift API સાથે સુસંગત છે), અને ફાઇલ સિસ્ટમ્સ;
• તમામ જરૂરી સેવાઓ શરૂ કરવા માટે શીંગો શરૂ કરવા;
• રૂક એજન્ટોની રચના.

રુકના એજન્ટો અલગ પોડ્સ દ્વારા રજૂ કરવામાં આવે છે જે દરેક કુબરનેટ્સ નોડ પર જમાવવામાં આવે છે. એજન્ટનો હેતુ પ્લગઇન રૂપરેખાંકન છે ફ્લેક્સવોલ્યુમ, જે Kubernetes માં સંગ્રહ વોલ્યુમો માટે આધાર પૂરો પાડે છે. એજન્ટ સ્ટોરેજની કામગીરીને અમલમાં મૂકે છે: નેટવર્ક સ્ટોરેજ ઉપકરણોને જોડે છે, વોલ્યુમ માઉન્ટ કરે છે, ફાઇલ સિસ્ટમને ફોર્મેટ કરે છે, વગેરે.

એકંદર કુબરનેટ્સ ક્લસ્ટર યોજનામાં રૂક ઘટકોનું સ્થાન અને ભૂમિકા

રૂક ત્રણ પ્રકારના સ્ટોરેજ ઓફર કરે છે:

1. બ્લોક (બ્લોક, StorageClass) — સ્ટોરેજને એક હર્થમાં માઉન્ટ કરે છે;
2. પદાર્થ (વસ્તુ, ObjectStore) - કુબરનેટ્સ ક્લસ્ટરની અંદર અને બહાર ઉપલબ્ધ (S3 API દ્વારા);
3. વહેંચાયેલ ફાઇલ સિસ્ટમ (વહેંચાયેલ ફાઇલ સિસ્ટમ, Filesystem) એક ફાઇલ સિસ્ટમ છે જે બહુવિધ પોડ્સમાંથી વાંચવા અને લખવા માટે માઉન્ટ કરી શકાય છે.

રૂકના આંતરિક ભાગમાં નીચેનાનો સમાવેશ થાય છે:

• મોન્સ - સેફ મોનિટરિંગ માટે શીંગો (પહેલાથી જ ઉલ્લેખિત સેફ-મોન સાથે);
• ઓએસડી - ceph-osd ડિમોન્સ સાથે શીંગો (ઓબ્જેક્ટ સ્ટોરેજ ડિમન);
• એમજીઆર - એક રાક્ષસ સાથે શીંગો ceph-mgr (Ceph મેનેજર), જે બાહ્ય સિસ્ટમો (મોનિટરિંગ/નિયંત્રણ) માટે વધારાની દેખરેખ ક્ષમતાઓ અને ઇન્ટરફેસ પ્રદાન કરે છે;
• આરજીડબ્લ્યુ (વૈકલ્પિક) - પદાર્થ સંગ્રહ સાથે શીંગો;
• એમડીએસ (વૈકલ્પિક) - વહેંચાયેલ ફાઇલ સિસ્ટમ સાથે શીંગો.

બધા રૂક ડિમન (મોન્સ, ઓએસડી, એમજીઆર, આરજીડબ્લ્યુ, એમડીએસ) એક જ દ્વિસંગી (rook) કન્ટેનરમાં ચાલી રહ્યું છે.

રૂક પ્રોજેક્ટના સંક્ષિપ્ત પરિચય માટે, આ ટૂંકી (12 સ્લાઇડ્સ) પણ ઉપયોગી થઈ શકે છે. પ્રસ્તુતિ Bassam Tabbara (ક્વોન્ટમ કોર્પ ખાતે CTO).

રૂકનું સંચાલન

રુક ઓપરેટર કુબરનેટસ વર્ઝન 1.6 અને ઉચ્ચતરને સંપૂર્ણપણે સપોર્ટ કરે છે (અને, આંશિક રીતે, જૂની K8s રિલીઝ - 1.5.2). તેમના સ્થાપન в સૌથી સરળ દૃશ્ય આના જેવું લાગે છે:

cd cluster/examples/kubernetes
kubectl create -f rook-operator.yaml
kubectl create -f rook-cluster.yaml

વધુમાં, રુક ઓપરેટર તૈયાર છે સુકાન ચાર્ટ, આભાર કે જેના માટે ઇન્સ્ટોલેશન આ રીતે કરી શકાય છે:

helm repo add rook-alpha https://charts.rook.io/alpha
helm install rook-alpha/rook

ઓછી માત્રામાં ઉપલબ્ધ સેટઅપ વિકલ્પો (ઉદાહરણ તરીકે, તમે આધારને અક્ષમ કરી શકો છો આરબીએસી, જો આ સુવિધાનો તમારા ક્લસ્ટરમાં ઉપયોગ થતો નથી), જેને પાસ કરવામાં આવે છે helm install પરિમાણ દ્વારા --set key=value[,key=value] (અથવા અલગ YAML ફાઇલમાં સ્ટોર કરો અને મારફતે ટ્રાન્સમિટ કરો -f values.yaml).

રુક ઓપરેટરને ઇન્સ્ટોલ કર્યા પછી અને તેના એજન્ટો સાથે પોડ્સ લોન્ચ કર્યા પછી, ફક્ત રુક ક્લસ્ટર બનાવવાનું બાકી છે, જેનું સૌથી સરળ રૂપરેખાંકન આના જેવું દેખાય છે (rook-cluster.yaml):

apiVersion: v1
kind: Namespace
metadata:
  name: rook
---
apiVersion: rook.io/v1alpha1
kind: Cluster
metadata:
  name: rook
  namespace: rook
spec:
  dataDirHostPath: /var/lib/rook
  storage:
    useAllNodes: true
    useAllDevices: false
    storeConfig:
      storeType: bluestore
      databaseSizeMB: 1024
      journalSizeMB: 1024

નોંધણી: વિશેષતા પર વિશેષ ધ્યાન આપવું જોઈએ dataDirHostPath, જેનું સાચું મૂલ્ય રીબૂટ પછી ક્લસ્ટરને સાચવવા માટે જરૂરી છે. કિસ્સાઓ માટે કે જ્યાં તેનો ઉપયોગ કુબરનેટ્સ હોસ્ટ્સ પર રૂક ડેટા માટે કાયમી સંગ્રહ સ્થાન તરીકે થાય છે, લેખકો આ નિર્દેશિકામાં ઓછામાં ઓછી 5 GB ફ્રી ડિસ્ક જગ્યા રાખવાની ભલામણ કરે છે.

જે બાકી છે તે ખરેખર રૂપરેખાંકનમાંથી ક્લસ્ટર બનાવવાનું છે અને ખાતરી કરો કે પોડ્સ ક્લસ્ટરમાં બનાવવામાં આવ્યા છે (નેમસ્પેસમાં rook):

kubectl create -f rook-cluster.yaml
kubectl -n rook get pod
NAME                              READY     STATUS    RESTARTS   AGE
rook-api-1511082791-7qs0m         1/1       Running   0          5m
rook-ceph-mgr0-1279756402-wc4vt   1/1       Running   0          5m
rook-ceph-mon0-jflt5              1/1       Running   0          6m
rook-ceph-mon1-wkc8p              1/1       Running   0          6m
rook-ceph-mon2-p31dj              1/1       Running   0          6m
rook-ceph-osd-0h6nb               1/1       Running   0          5m

અપગ્રેડ કરો રુક ક્લસ્ટર (નવા સંસ્કરણ સુધી) એ એક પ્રક્રિયા છે કે જે આ તબક્કે ચોક્કસ ક્રમમાં તેના તમામ ઘટકોને ક્રમિક અપડેટ કરવાની જરૂર છે, અને તમે ખાતરી કરો કે વર્તમાન રુક ઇન્સ્ટોલેશન સંપૂર્ણપણે "સ્વસ્થ" છે તેની ખાતરી કર્યા પછી જ તમે તેને શરૂ કરી શકો છો. રાજ્ય રુક સંસ્કરણ 0.5.0 થી 0.5.1 અપડેટ કરવાના ઉદાહરણનો ઉપયોગ કરીને વિગતવાર પગલું-દર-પગલાં સૂચનો આમાં મળી શકે છે. પ્રોજેક્ટ દસ્તાવેજીકરણ.

રૂક બ્લોગ પર ગયા નવેમ્બર પ્રકાશિત કરવામાં આવી હતી સરખામણી કામગીરી EBS સાથે. તેના પરિણામો ધ્યાન આપવા લાયક છે, અને ટૂંકમાં, તે નીચે મુજબ છે:

પ્રોસ્પેક્ટ્સ

રુકની વર્તમાન સ્થિતિ આલ્ફા છે, અને આજની તારીખની નવીનતમ મુખ્ય રજૂઆત છે આવૃત્તિ 0.6, નવેમ્બર 2017 માં પ્રકાશિત (વર્તમાન કરેક્શન - v0.6.2 - 14 ડિસેમ્બરે બહાર આવ્યો). પહેલેથી જ 2018 ના પ્રથમ અર્ધમાં, વધુ પરિપક્વ સંસ્કરણોના પ્રકાશનની અપેક્ષા છે: બીટા અને સ્થિર (ઉત્પાદનમાં ઉપયોગ માટે સત્તાવાર રીતે તૈયાર).

અનુસાર માર્ગ નકશો પ્રોજેક્ટ, વિકાસકર્તાઓ પાસે ઓછામાં ઓછા આગામી બે પ્રકાશનોમાં રુકના વિકાસ માટે વિગતવાર દ્રષ્ટિ છે: 0.7 (તેની તૈયારી GitHub ટ્રેકરમાં છે અંદાજ 60% તરીકે) અને 0.8. અપેક્ષિત ફેરફારોમાં Ceph બ્લોક અને Ceph ઑબ્જેક્ટ માટે બીટા વર્ઝન સ્ટેટસ માટે સપોર્ટનું ટ્રાન્સફર, CephFS માટે વોલ્યુમ્સની ગતિશીલ જોગવાઈ, અદ્યતન લોગિંગ સિસ્ટમ, સ્વચાલિત ક્લસ્ટર અપડેટ્સ, વોલ્યુમ્સ માટે સ્નેપશોટ માટે સપોર્ટ છે.

રુકને નંબરમાં લેવું CNCF પ્રોજેક્ટ્સ (અત્યાર સુધી ખૂબ જ પ્રારંભિક તબક્કે - "પ્રારંભ-સ્તર" - સાથે સમાનતા પર લિંકર્ડ и CoreDNS) ઉત્પાદનમાં રસ વધવાની એક પ્રકારની ગેરંટી છે. ક્લાઉડ એપ્લીકેશનની દુનિયામાં તે કેવી રીતે પગપેસારો કરશે તે એકવાર સ્થિર વર્ઝન રિલીઝ થયા પછી સ્પષ્ટ થઈ જશે, જે ચોક્કસપણે નવા ટેસ્ટર્સ અને વપરાશકર્તાઓને રુકમાં લાવશે.

PS

અમારા બ્લોગ પર પણ વાંચો:

• «Ceph પર આધારિત કુબરનેટ્સમાં જોગવાઈ સાથે સતત સ્ટોરેજ બનાવવું»;
• «કુબરનેટ્સ માટે ઓપરેટર્સ: સ્ટેટફુલ એપ્લિકેશન કેવી રીતે ચલાવવી»;
• «CoreDNS - ક્લાઉડ નેટિવ વર્લ્ડ માટે DNS સર્વર અને કુબરનેટ્સ માટે સર્વિસ ડિસ્કવરી»;
• «કન્ટેનર નેટવર્કિંગ ઇન્ટરફેસ (CNI) એ એક નેટવર્ક ઇન્ટરફેસ છે અને તેના માટે માનક છે Linux- કન્ટેનર»;
• «કુબરનેટ્સ સાથેની ઇન્ફ્રાસ્ટ્રક્ચર સસ્તું સેવા તરીકે».

સોર્સ: www.habr.com