रुक - कुबर्नेट्ससाठी सेल्फ-सर्व्हिस डेटा स्टोअर

29 जानेवारी रोजी, CNCF (क्लाउड नेटिव्ह कॉम्प्युटिंग फाउंडेशन) च्या तांत्रिक समितीने, कंटेनर आणि क्लाउड नेटिव्हच्या जगातील कुबर्नेट्स, प्रोमिथियस आणि इतर मुक्त स्त्रोत उत्पादनांच्या मागे असलेली संस्था, घोषित केले प्रकल्पाच्या स्वीकृतीबद्दल रुक त्यांच्या श्रेणीत. या "कुबर्नेट्स मधील वितरित स्टोरेज ऑर्केस्ट्रेटर" जाणून घेण्याची एक उत्तम संधी.

कोणत्या प्रकारचे Rook?

रुक गो मध्ये लिहिलेले सॉफ्टवेअर आहे (द्वारा वितरित मोफत Apache License 2.0 अंतर्गत), डेटा वेअरहाऊसना स्वयंचलित कार्ये प्रदान करण्यासाठी डिझाइन केलेले स्व-व्यवस्थापन, स्व-स्केलिंग आणि स्व-उपचार. हे करण्यासाठी, रुक स्वयंचलित करते (कुबरनेट वातावरणात वापरल्या जाणार्‍या डेटा स्टोअरसाठी): उपयोजन, बूटस्ट्रॅपिंग, कॉन्फिगरेशन, तरतूद, स्केलिंग, अद्यतने, स्थलांतर, आपत्ती पुनर्प्राप्ती, देखरेख आणि संसाधन व्यवस्थापन.

हा प्रकल्प अल्फा टप्प्यात आहे आणि कुबर्नेट्स क्लस्टर्समध्ये सेफ वितरीत स्टोरेज सिस्टमचे आयोजन करण्यात माहिर आहे. लेखक इतर स्टोरेज सिस्टमला समर्थन देण्याची योजना देखील जाहीर करतात, परंतु पुढील प्रकाशनांमध्ये हे होणार नाही.

घटक आणि तांत्रिक उपकरण

कुबर्नेट्समधील रुकचे काम एका विशेष ऑपरेटरवर आधारित आहे (आम्ही मध्ये कुबर्नेट्स ऑपरेटर्सबद्दल अधिक लिहिले हा लेख), जे स्टोरेज कॉन्फिगरेशन स्वयंचलित करते आणि त्याचे निरीक्षण लागू करते.

त्यामुळे रुक ऑपरेटर डिप्लॉयमेंट आणि रिपॉजिटरी नंतरच्या देखरेखीसाठी आवश्यक असलेले सर्व काही कंटेनर असल्याचे दिसते. ऑपरेटरच्या जबाबदाऱ्यांमध्ये हे समाविष्ट आहे:

• सेफ स्टोरेज डिमनसाठी डेमनसेट तयार करणे (ceph-osd) साध्या RADOS क्लस्टरसह;
• Ceph निरीक्षणासाठी शेंगा तयार करणे (पासून ceph-mon, क्लस्टरची स्थिती तपासत आहे; कोरमसाठी, बहुतेक प्रकरणांमध्ये तीन प्रती उपयोजित केल्या जातात, आणि त्यापैकी काही पडल्यास, नवीन उगवते);
• CRD चे व्यवस्थापन (सानुकूल संसाधन व्याख्या) स्वतःसाठी क्लस्टर, स्टोरेज पूल, ऑब्जेक्ट स्टोअर्स (HTTP विनंत्या देण्यासाठी संसाधने आणि सेवांचा संच जे ऑब्जेक्ट्सवर PUT/GET करतात - ते S3 आणि Swift API शी सुसंगत आहेत)आणि फाइल प्रणाली;
• सर्व आवश्यक सेवा सुरू करण्यासाठी पॉड्स सुरू करणे;
• रुक एजंट्सची निर्मिती.

रुकचे एजंट प्रत्येक कुबर्नेट्स नोडवर तैनात केलेल्या स्वतंत्र पॉड्सद्वारे प्रस्तुत केले जातात. एजंटचा उद्देश प्लगइन कॉन्फिगरेशन आहे फ्लेक्स व्हॉल्यूम, जे Kubernetes मधील स्टोरेज व्हॉल्यूमसाठी समर्थन पुरवते. एजंट स्टोरेजचे ऑपरेशन लागू करतो: नेटवर्क स्टोरेज डिव्हाइसेस कनेक्ट करतो, व्हॉल्यूम माउंट करतो, फाइल सिस्टम फॉरमॅट करतो इ.

एकूण कुबर्नेट्स क्लस्टर योजनेत रुक घटकांचे स्थान आणि भूमिका

रुक तीन प्रकारचे स्टोरेज ऑफर करते:

1. ब्लॉक (ब्लॉक, StorageClass) — स्टोरेजला एकाच चूलीवर बसवते;
2. वस्तू (ऑब्जेक्ट, ObjectStore) - Kubernetes क्लस्टरच्या आत आणि बाहेर उपलब्ध (S3 API द्वारे);
3. सामायिक फाइल प्रणाली (सामायिक फाइल प्रणाली, Filesystem) एक फाइल सिस्टम आहे जी एकाधिक पॉड्समधून वाचन आणि लिहिण्यासाठी माउंट केली जाऊ शकते.

रुकच्या अंतर्गत भागांमध्ये हे समाविष्ट आहे:

• उंचवटा - सेफ मॉनिटरिंगसाठी शेंगा (आधीच नमूद केलेल्या सेफ-मॉनसह);
• ओएसडी - सेफ-ओएसडी डिमनसह शेंगा (ऑब्जेक्ट स्टोरेज डिमन);
• एमजीआर - एक राक्षस सह शेंगा ceph-mgr (Ceph व्यवस्थापक), जे बाह्य प्रणाली (निरीक्षण/नियंत्रण) साठी अतिरिक्त देखरेख क्षमता आणि इंटरफेस प्रदान करते;
• आरजीडब्ल्यू (पर्यायी) - ऑब्जेक्ट स्टोरेजसह शेंगा;
• एमडीएस (पर्यायी) - सामायिक फाइल प्रणालीसह पॉड्स.

सर्व रुक डिमन (मॉन्स, ओएसडी, एमजीआर, आरजीडब्ल्यू, एमडीएस) एकाच बायनरीमध्ये संकलित केले जातात (rook) कंटेनरमध्ये चालत आहे.

रुक प्रकल्पाच्या संक्षिप्त परिचयासाठी, ही लहान (१२ स्लाइड्स) देखील उपयुक्त ठरू शकतात. सादरीकरण बसम तबबाराकडून (क्वांटम कॉर्पमधील सीटीओ).

रुकचे संचालन

Rook ऑपरेटर Kubernetes आवृत्ती 1.6 आणि उच्चतर पूर्णतः समर्थन करतो (आणि, अंशतः, जुने K8 रिलीझ - 1.5.2). त्याच्या स्थापना в सर्वात सोपी परिस्थिती असे दिसते:

cd cluster/examples/kubernetes
kubectl create -f rook-operator.yaml
kubectl create -f rook-cluster.yaml

याव्यतिरिक्त, रुक ऑपरेटर तयार आहे हेल्म चार्ट, धन्यवाद ज्याची स्थापना याप्रमाणे केली जाऊ शकते:

helm repo add rook-alpha https://charts.rook.io/alpha
helm install rook-alpha/rook

कमी प्रमाणात उपलब्ध सेटअप पर्याय (उदाहरणार्थ, तुम्ही समर्थन अक्षम करू शकता RBAC, जर हे वैशिष्ट्य तुमच्या क्लस्टरमध्ये वापरले जात नसेल), ज्यांना पास केले जाते helm install पॅरामीटर द्वारे --set key=value[,key=value] (किंवा वेगळ्या YAML फाईलमध्ये संग्रहित करा आणि द्वारे प्रसारित करा -f values.yaml).

रुक ऑपरेटर स्थापित केल्यानंतर आणि त्याच्या एजंटसह पॉड्स लाँच केल्यानंतर, फक्त रुक क्लस्टर तयार करणे बाकी आहे, ज्याचे सर्वात सोपे कॉन्फिगरेशन असे दिसते (rook-cluster.yaml):

apiVersion: v1
kind: Namespace
metadata:
  name: rook
---
apiVersion: rook.io/v1alpha1
kind: Cluster
metadata:
  name: rook
  namespace: rook
spec:
  dataDirHostPath: /var/lib/rook
  storage:
    useAllNodes: true
    useAllDevices: false
    storeConfig:
      storeType: bluestore
      databaseSizeMB: 1024
      journalSizeMB: 1024

शेरा: विशेषताकडे विशेष लक्ष दिले पाहिजे dataDirHostPath, रीबूट केल्यानंतर क्लस्टर जतन करण्यासाठी ज्याचे योग्य मूल्य आवश्यक आहे. Kubernetes होस्टवरील रुक डेटासाठी कायमस्वरूपी स्टोरेज स्थान म्हणून वापरल्या गेलेल्या प्रकरणांसाठी, लेखक या निर्देशिकेत किमान 5 GB विनामूल्य डिस्क जागा ठेवण्याची शिफारस करतात.

बाकी फक्त कॉन्फिगरेशनमधून क्लस्टर तयार करणे आणि क्लस्टरमध्ये (नेमस्पेसमध्ये) पॉड्स तयार झाल्याची खात्री करणे. rook):

kubectl create -f rook-cluster.yaml
kubectl -n rook get pod
NAME                              READY     STATUS    RESTARTS   AGE
rook-api-1511082791-7qs0m         1/1       Running   0          5m
rook-ceph-mgr0-1279756402-wc4vt   1/1       Running   0          5m
rook-ceph-mon0-jflt5              1/1       Running   0          6m
rook-ceph-mon1-wkc8p              1/1       Running   0          6m
rook-ceph-mon2-p31dj              1/1       Running   0          6m
rook-ceph-osd-0h6nb               1/1       Running   0          5m

श्रेणीसुधारित करा रुक क्लस्टर (नवीन आवृत्तीपर्यंत) ही एक प्रक्रिया आहे ज्यासाठी या टप्प्यावर त्याचे सर्व घटक एका विशिष्ट क्रमाने अनुक्रमिक अद्यतनित करणे आवश्यक आहे, आणि सध्याची रुक स्थापना पूर्णपणे "निरोगी" आहे याची खात्री केल्यानंतरच तुम्ही ते सुरू करू शकता. राज्य रुक आवृत्ती 0.5.0 ते 0.5.1 अद्यतनित करण्याचे उदाहरण वापरून तपशीलवार चरण-दर-चरण सूचना आढळू शकतात. प्रकल्प दस्तऐवजीकरण.

रुक ब्लॉगवर गेल्या नोव्हेंबरमध्ये प्रकाशित झाले होते तुलना उत्पादकता EBS सह. त्याचे परिणाम लक्ष देण्यास पात्र आहेत आणि थोडक्यात ते खालीलप्रमाणे आहेत:

संभावना

रुकची सद्यस्थिती अल्फा आहे आणि आजपर्यंतचे नवीनतम प्रमुख प्रकाशन आहे आवृत्ती 0.6, नोव्हेंबर 2017 मध्ये प्रसिद्ध झाले (वर्तमान सुधारणा - v0.6.2 - 14 डिसेंबर रोजी बाहेर आले). आधीच 2018 च्या पहिल्या सहामाहीत, अधिक परिपक्व आवृत्त्यांचे प्रकाशन अपेक्षित आहे: बीटा आणि स्थिर (उत्पादनात वापरण्यासाठी अधिकृतपणे तयार).

मते नकाशा प्रकल्प, डेव्हलपर्सकडे किमान पुढील दोन प्रकाशनांमध्ये रुकच्या विकासासाठी तपशीलवार दृष्टी आहे: 0.7 (त्याची तयारी GitHub ट्रॅकरमध्ये आहे मूल्यमापन केले जाते 60%) आणि 0.8. अपेक्षित बदलांपैकी Ceph Block आणि Ceph Object साठी समर्थनाचे बीटा आवृत्ती स्थितीत हस्तांतरण, CephFS साठी व्हॉल्यूमची डायनॅमिक तरतूद, प्रगत लॉगिंग सिस्टम, स्वयंचलित क्लस्टर अद्यतने, व्हॉल्यूमसाठी स्नॅपशॉटसाठी समर्थन.

रुक नंबर मध्ये घेणे CNCF प्रकल्प (आतापर्यंत अगदी सुरुवातीच्या टप्प्यावर - "प्रारंभ-स्तर" - बरोबरीने linkerd и CoreDNS) ही एक प्रकारची हमी आहे जी उत्पादनामध्ये वाढणारी स्वारस्य आहे. क्लाउड अॅप्लिकेशन्सच्या जगात ते कसे स्थान मिळवेल हे स्थिर आवृत्त्या रिलीज झाल्यानंतर स्पष्ट होईल, जे नक्कीच नवीन परीक्षक आणि वापरकर्त्यांना रूकमध्ये आणेल.

PS

आमच्या ब्लॉगवर देखील वाचा:

• «Ceph वर आधारित Kubernetes मध्ये तरतूदीसह पर्सिस्टंट स्टोरेज तयार करणे";
• «कुबर्नेट्ससाठी ऑपरेटर: स्टेटफुल ऍप्लिकेशन्स कसे चालवायचे";
• «CoreDNS - क्लाउड नेटिव्ह वर्ल्डसाठी DNS सर्व्हर आणि Kubernetes साठी सर्व्हिस डिस्कवरी";
• «कंटेनर नेटवर्किंग इंटरफेस (CNI) - नेटवर्क इंटरफेस आणि लिनक्स कंटेनरसाठी मानक";
• «परवडणारी सेवा म्हणून Kubernetes सह पायाभूत सुविधा».

स्त्रोत: www.habr.com