Serverivabad arvutused riistvara OpenWhisk pÔhjal, osa 4

Serverivabad arvutused riistvara OpenWhisk pÔhjal, osa 4

See artikkel lĂ”petab OpenWhiski tĂ”lgete mĂ€rkmete tsĂŒkli autori Priti Desai. TĂ€na kĂ€sitleme OpenWhiski kĂ€itamise protsessi Kubernetesel, koos parandatud kĂ€skudega, et need töötaksid uute rakenduste versioonidega. Samuti kirjeldatakse OpenWhiski funktsioonide kĂ€ivitamise protsessi Knative'i ja TektonCD abil Kuberneteses, kasutades Node.js töölt.

OpenWhiski paigaldamine Kubernetesesse

MĂ”ne pĂ€eva jooksul viisn lĂ€bi eksperimenti OpenWhiski paigaldamiseks Kubernetesesse, et luua lihtne ja kiire platvorm ĂŒlesannete harjutamiseks. Kuna olen Kuberneteses algaja, usun, et poolteist pĂ€eva kulus eduka paigalduse peale. Repositooriumis on olemas vĂ€ga arusaadavad juhised OpenWhiski paigaldamiseks Kubernetesesse. Siin on juhised paigaldamiseks, mille olen teinud Macile ( selles repositooriumis on vĂ€ga arusaadavad juhised OpenWhiski kĂ€ivitamiseks Kuberneteses. Siin on juhised, mis on mĂ”eldud Macile (ma teen ka kĂ”ik Linuxis, kuna eelistan Linuxit. — tĂ”lkija mĂ€rkus).

  1. Installime paketihalduri asdf, pÀrast mida parandame automaatselt ~/.bash_profile vÔi selle analooge nii:

$ brew install asdf
$ [ -s "/usr/local/opt/asdf/asdf.sh" ] && . /usr/local/opt/asdf/asdf.sh
$ source ~/.bash_profile

[Linuxis ei ole see samm vajalik, kuigi brew on olemas. — tĂ”lkija mĂ€rkus]

  1. Lisame pluginad minikube ja kubelet:

$ asdf plugin-add kubectl
$ asdf plugin-add minikube

[JĂ€llegi jĂ€tame selle sammu Linuxis vahele. — tĂ”lkija mĂ€rkus]

  1. Paigaldame minikube'i ja kubelet'i:

$ asdf install kubectl 1.9.0
$ asdf global kubectl 1.9.0
$ asdf install minikube 0.25.2
$ asdf global minikube 0.25.2

[paigaldatakse konkreetsed versioonid, kuid kontrollisin kĂ”ike uusimate versioonide peal Linuxis; kahtlen, et oleks ohtlik paigaldada latest. — tĂ”lkija mĂ€rkus]

Linuxis tehakse see samm umbes nii (kÔik paigaldatakse ~/bin, mis on mul PATH-is, tÔlkija mÀrkus):

$ curl -L0 minikube https://storage.googleapis.com/minikube/releases/latest/minikube-linux-amd64 && chmod +x minikube && mv minikube ~/bin/
$ curl -L0 https://storage.googleapis.com/kubernetes-release/release/$(curl -s https://storage.googleapis.com/kubernetes-release/release/stable.txt)/bin/linux/amd64/kubectl && chmod +x kubectl && mv kubectl ~/bin/

  1. Loome virtuaalmasina minikube (VirtualBox peab olema eelnevalt paigaldatud):

$ minikube start --cpus 2 --memory 4096 --kubernetes-version=v1.9.0 --extra-config=apiserver.Authorization.Mode=RBAC

[Minul töötab see kĂ€suga minikube start , ilma parameetriteta ja vaikeseadistustega. — tĂ”lkija mĂ€rkus]

$ minikube start
  minikube v1.5.2 Debian 8.11-l
  Automaatne 'virtualbox' draiveri valik
  VM kÀivitamise pildi allalaadimine ...
    > minikube-v1.5.1.iso.sha256: 65 B / 65 B [--------------] 100.00% ? p/s 0s
    > minikube-v1.5.1.iso: 143.76 MiB / 143.76 MiB [-] 100.00% 5.63 MiB p/s 26s
  Loome virtuaalmasina (CPUs=2, Memory=4096MB, Disk=20000MB) ...
  Valmistame Kubernetes v1.16.2 Dockeris '18.09.9' ...
  Allalaadimine kubelet v1.16.2
  Allalaadimine kubeadm v1.16.2
  Piltide allalaadimine ...
  Kubernetes kÀivitamine ...  Ootamine: apiserver
  Valmis! kubectl on nĂŒĂŒd seadistatud "minikube" kasutamiseks

  1. LĂŒlitame Dockeris vĂ”rgu segamatuks:

$ minikube ssh -- sudo ip link set docker0 promisc on

  1. Loome nimete ruumi ja mÀrgistame tööÔla:

$ kubectl create namespace openwhisk
$ kubectl label nodes --all openwhisk-role=invoker

  1. Saame repositooriumi sisu ja ĂŒlekirjutame mycluster.yaml failis sisalduva ingressi tĂŒĂŒbi:

$ git clone https://github.com/apache/incubator-openwhisk-deploy-kube.git
$ cd incubator-openwhisk-deploy-kube/
$ cat < mycluster.yaml
whisk:
    ingress:
        type: NodePort
            api_host_name: 192.168.99.100
            api_host_port: 31001
nginx:
    httpsNodePort: 31001
EOF

  1. Paigaldame Helmi ja teeme paigaldamise selle abil:

$ brew install kubernetes-helm
$ helm init # init Helm Tiller, ei ole vajalik Helm v3+ jaoks
$ kubectl get pods -n kube-system # veenduge, et tiller-deploy on töötab, ei ole vajalik helm v3+ jaoks
$ kubectl create clusterrolebinding tiller-cluster-admin --clusterrole=cluster-admin --serviceaccount=kube-system:default
$ helm install ./openwhisk/helm/ --namespace=openwhisk -f mycluster.yaml

[Linuxis viimaste versioonidega (v.3.0.1 oli saadaval) on see veidi teine. — tĂ”lkija mĂ€rkus]

$ curl -L0 https://get.helm.sh/helm-v3.0.1-linux-amd64.tar.gz | tar -xzvf - linux-amd64/helm --strip-components=1; sudo mv helm /usr/local/bin
$ kubectl create clusterrolebinding tiller-cluster-admin --clusterrole=cluster-admin --serviceaccount=kube-system:default
$ helm install ./openwhisk/helm/ --namespace=openwhisk --generate-name -f mycluster.yaml

  1. Kontrollime, et kÔik tÔusis (STATUS = Running vÔi Completed):

$ kubectl get pods -n openwhisk
NIMI                                                            VALMIS   STAATUS      UUENDUSI   VANUS
openwhisk-1576070780-alarmprovider-6868dc694-plvpf                1/1     Töötab     1          1d5h
openwhisk-1576070780-apigateway-8d56f4979-825hf                   1/1     Töötab     1          1d5h
openwhisk-1576070780-cloudantprovider-544bb46596-9scph            1/1     Töötab     1          1d5h
openwhisk-1576070780-controller-0                                 1/1     Töötab     2          1d5h
openwhisk-1576070780-couchdb-7fd7f6c7cc-42tw6                     1/1     Töötab     1          1d5h
openwhisk-1576070780-gen-certs-z9nsb                              0/1     Valmis   0          1d5h
openwhisk-1576070780-init-couchdb-r2vmt                           0/1     Valmis   0          1d5h
openwhisk-1576070780-install-packages-27dtr                       0/1     Valmis   0          1d4h
openwhisk-1576070780-invoker-0                                    1/1     Töötab     1          1d5h
openwhisk-1576070780-kafka-0                                      1/1     Töötab     1          1d5h
openwhisk-1576070780-kafkaprovider-f8b4cf4fc-7z4gt                1/1     Töötab     1          1d5h
openwhisk-1576070780-nginx-6dbdbf69bc-5x76n                       1/1     Töötab     1          1d5h
openwhisk-1576070780-redis-cfd8756f4-hkrt6                        1/1     Töötab     1          1d5h
openwhisk-1576070780-wskadmin                                     1/1     Töötab     1          1d5h
openwhisk-1576070780-zookeeper-0                                  1/1     Töötab     1          1d5h
wskopenwhisk-1576070780-invoker-00-1-prewarm-nodejs10             1/1     Töötab     0          61s
wskopenwhisk-1576070780-invoker-00-2-prewarm-nodejs10             1/1     Töötab     0          61s
wskopenwhisk-1576070780-invoker-00-3-whisksystem-invokerhealtht   1/1     Töötab     0          59s

  1. Seame wsk tööle:

$ wsk property set --apihost 192.168.99.100:31001
$ wsk property set --auth 23bc46b1-71f6-4ed5-8c54-816aa4f8c502:123zO3xZCLrMN6v2BKK1dXYFpXlPkccOFqm12CdAsMgRU4VrNZ9lyGVCGuMDGIwP

Kontrollin:

$ wsk -i list
Entities in namespace: default
packages
actions
triggers
rules

Probleemid ja nende lahendused

getsockopt: ĂŒhendus keeldutud

$ wsk -i list
error: Unable to obtain the list of entities for namespace 'default': Get http://192.168.99.100:31001/api/v1/namespaces/_/actions?limit=0&skip=0: dial tcp 192.168.99.100:31001: getsockopt: ĂŒhendus keeldutud

Kontrollime, kas konteinerid on namespace openwhisk olemas Running, kuna mÔnikord kukub see alla vigadega CreateContainerConfigError.

Invoker veel initsialiseerimisel — Init:1/2

Jooksu keskkondade allalaadimine vĂ”ib vĂ”tta aega. Kiiremaks muutmiseks vĂ”ib mÀÀrata lĂŒhendatud minimaalne nimekiri failis mycluster.yaml:

whisk:
  runtimes: "runtimes-minimal-travis.json"

Konteiner nimega -install-packages- kukub veaga

Lihtsalt pikendage elavuse testide ajutÀhtajaid.

OpenWhisk installimine Knative peal

Priti Desai tegi installatsiooni IBM-i pilvekliendile ja tavalisele minikube'ile, kasutades Knative Build ja BuildTemplates. Ka mina paigaldan minikube'i peal, jĂ€rgides kuidas see oli varem kirja pandud meie blogis — kasutades uusimaid tarkvaraversioone. Kuna Knative Build ja BuildTemplates on ametlikult aegunud, kasutan soovitatud asendust Tekton Pipelines vormis. JĂ€rgmine artikkel on kirjutatud pĂ€rast Tekton Pipelines'i dokumentatsiooni lugemist, kuid pĂ”hineb Priti ideedel. Tööks on vajalik ligipÀÀs mĂ”nele Docker Registry'le — nagu ka algne autor, kasutan DockerHub'i.

$ curl -L0 https://github.com/solo-io/gloo/releases/download/v1.2.10/glooctl-linux-amd64; chmod +x glooctl-linux-amd64; mv glooctl-linux-amd64 ~/bin
$ glooctl install knative
$ kubectl get pods -n knative-serving
NAME                              READY   STATUS    RESTARTS   AGE
activator-77fc555665-rvrst        1/1     Running   0          2m23s
autoscaler-5c98b7c9b6-x8hh4       1/1     Running   0          2m21s
autoscaler-hpa-5cfd4f6845-w87kq   1/1     Running   0          2m22s
controller-7fd74c8f67-tprm8       1/1     Running   0          2m19s
webhook-74847bb77c-txr2g          1/1     Running   0          2m17s
$ kubectl get pods -n gloo-system
NAME                                      READY   STATUS    RESTARTS   AGE
discovery-859d7fbc9c-8xhvh                1/1     Running   0          51s
gloo-545886d9c6-85mwt                     1/1     Running   0          51s
ingress-67d4996d75-lkkmw                  1/1     Running   0          50s
knative-external-proxy-767dfd656c-wwv2z   1/1     Running   0          50s
knative-internal-proxy-6fdddcc6b5-7vqd8   1/1     Running   0          51s

Serverivabad arvutused riistvara OpenWhisk pÔhjal, osa 4
OpenWhiski kogumine ja töö Knative peal

  1. Saame sisu selle hoidla:

$ git clone https://github.com/tektoncd/catalog/
$ cd catalog/openwhisk

  1. Seame keskkonna muutujate kaudu ligipÀÀsud Registry'le ja salvestame need Kubernetes'i saladusena:

$ export DOCKER_USERNAME=
$ export DOCKER_PASSWORD=
$ sed -e 's/${DOCKER_USERNAME}/'$DOCKER_USERNAME'/' -e 's/${DOCKER_PASSWORD}/'$DOCKER_PASSWORD'/' docker-secret.yaml.tmpl > docker-secret.yaml
$ kubectl apply -f docker-secret.yaml

Kontrollin:

$ kubectl get secret
NAME                    TYPE                                  DATA      AGE
dockerhub-user-pass     kubernetes.io/basic-auth              2         21s

  1. Loome konto keskkondade kogumiseks:

$ kubectl apply -f service-account.yaml

Kontrollin:

$ kubectl get serviceaccount/openwhisk-runtime-builder
NAME                        SECRETS   AGE
openwhisk-runtime-builder   2         31m

  1. Loome ĂŒlesande OpenWhiski pildi koostamiseks

$ kubectl apply -f openwhisk.yaml
task.tekton.dev/openwhisk created

  1. KĂ€ivitame ĂŒlesande pildi koostamiseks (nĂ€iteks NodeJS):

Loome faili taskrun.yaml jÀrgmise sisuga:

# Git Pipeline Resource for OpenWhisk NodeJS Runtime
apiVersion: tekton.dev/v1alpha1
kind: PipelineResource
metadata:
    name: openwhisk-nodejs-runtime-git
spec:
    type: git
    params:
        - name: revision
          value: master
        - name: url
          value: https://github.com/apache/openwhisk-runtime-nodejs.git
---

# Image Pipeline Resource for OpenWhisk NodeJS Sample Application
apiVersion: tekton.dev/v1alpha1
kind: PipelineResource
metadata:
    name: openwhisk-nodejs-helloworld-image
spec:
    type: image
    params:
        - name: url
          value: docker.io/${DOCKER_USERNAME}/openwhisk-nodejs-helloworld
---

# Task Run to build NodeJS image with the action source
apiVersion: tekton.dev/v1alpha1
kind: TaskRun
metadata:
    name: openwhisk-nodejs-helloworld
spec:
    serviceAccountName: openwhisk-runtime-builder
    taskRef:
        name: openwhisk
    inputs:
        resources:
            - name: runtime-git
              resourceRef:
                name: openwhisk-nodejs-runtime-git
        params:
            - name: DOCKERFILE
              value: "./runtime-git/core/nodejs10Action/knative/Dockerfile"
            - name: OW_ACTION_NAME
              value: "nodejs-helloworld"
            - name: OW_ACTION_CODE
              value: "function main() {return {payload: 'Hello World!'};}"
            - name: OW_PROJECT_URL
              value: ""
    outputs:
        resources:
            - name: runtime-image
              resourceRef:
                name: openwhisk-nodejs-helloworld-image
---

Kohandame seda faili vastavalt hetkeandmetele:

$ sed 's/${DOCKER_USERNAME}/'$DOCKER_USERNAME'/' -i taskrun.yaml

Kohaldame:

$ kubectl apply -f taskrun.yaml
pipelineresource.tekton.dev/openwhisk-nodejs-runtime-git created
pipelineresource.tekton.dev/openwhisk-nodejs-helloworld-image created
taskrun.tekton.dev/openwhisk-nodejs-helloworld created

Töö kontrollimine seisneb pod'i nime hankimises, selle oleku vaatamises. Samuti saab vaadata iga sammu tegevuslugu, nÀiteks:

$ kubectl get taskrun
NAME                          SUCCEEDED   REASON      STARTTIME   COMPLETIONTIME
openwhisk-nodejs-helloworld   True        Succeeded   5m15s       44s
$ kubectl get pod openwhisk-nodejs-helloworld-pod-4640d3
NAME                                     READY   STATUS      RESTARTS   AGE
openwhisk-nodejs-helloworld-pod-4640d3   0/6     Completed   0          5m20s
$ kubectl logs openwhisk-nodejs-helloworld-pod-4640d3 -c step-git-source-openwhisk-nodejs-runtime-git-r8vhr
{"level":"info","ts":1576532931.5880227,"logger":"fallback-logger","caller":"logging/config.go:69","msg":"Fetch GitHub commit ID from kodata failed: open "/var/run/ko/refs/heads/master: no such file or directory"}
{"level":"info","ts":1576532936.538926,"logger":"fallback-logger","caller":"git/git.go:81","msg":"Successfully cloned https://github.com/apache/openwhisk-runtime-nodejs.git @ master in path /workspace/runtime-git"}
{"level":"warn","ts":1576532936.5395331,"logger":"fallback-logger","caller":"git/git.go:128","msg":"Unexpected error: creating symlink: symlink /tekton/home/.ssh /root/.ssh: file exists"}
{"level":"info","ts":1576532936.8202565,"logger":"fallback-logger","caller":"git/git.go:109","msg":"Successfully initialized and updated submodules in path /workspace/runtime-git"}

PÀrast protsessi lÔpetamist on Registry's pilt, mille saab kasutada kn-iga Knative teenuste haldamiseks, nÀiteks:

kn service create nodejs-helloworld --image docker.io/${DOCKER_USERNAME}/openwhisk-nodejs-helloworld
Service 'nodejs-helloworld' successfully created in namespace 'default'.
Waiting for service 'nodejs-helloworld' to become ready ... OK

Service URL:
http://nodejs-helloworld.default.example.com

Gloo kasutamise korral saab töökindlust kontrollida jÀrgmiselt:

$ curl -H "Host: nodejs-helloworld.default.example.com" -X POST $(glooctl proxy url --name knative-external-proxy)
{"OK":true}
$ curl -H "Host: nodejs-helloworld.default.example.com" -X POST $(glooctl proxy url --name knative-external-proxy)
{"payload":"Hello World!"}

Teised tsĂŒkli artiklid

Serverless arvutused OpenWhiski pÔhjal, osa 1
Serveriteta arvutus OpenWhiski pÔhjal, osa 2
Serveriteta arvutus OpenWhiski pÔhjal, osa 3
Serverivabad arvutused riistvara OpenWhisk pÔhjal, osa 4

Allikas: habr.com

Osta usaldusvÀÀrne veebihosting DDoS kaitsega, VPS VDS serverid đŸ”„ Osta usaldusvÀÀrne veebihosting DDoS kaitsega, VPS VDS serverid | ProHoster