Oversikt over Skaffold for utvikling pÄ Kubernetes

Oversikt over Skaffold for utvikling pÄ Kubernetes

For one and a half years, on March 5, 2018, Google released the first alpha version of its Open Source project for CI/CD called Skaffold, aimed at creating "simple and reproducible development under Kubernetes" so that developers could focus on development rather than administration. What makes Skaffold interesting? It turns out that it has several advantages up its sleeve that can make it a powerful tool for developers and possibly for operations engineers as well. Let's get acquainted with the project and its capabilities.

NB: By the way, we briefly mentioned Skaffold in our general overview of development tools, the lives of which are tied to Kubernetes.

Theory. Purpose and Capabilities

So, in general terms, Skaffold addresses the problem of automating the CI/CD cycle (at the build, push, deploy stages) by providing developers with prompt feedback, i.e., the ability to quickly receive the results of code changes in the form of an updated application running in a Kubernetes cluster. And it can work in different environments (dev, stage, production
), for which Skaffold helps describe the corresponding deployment pipelines.

The source code of Skaffold is written in Go, distribueres under the permissive Apache License 2.0 (GitHub).

Let's consider the main features and characteristics. The first can include the following:

  • Skaffold offers tools for creating CI/CD pipelines.
  • It allows for background monitoring of changes in the source code and launches an automated process to build code into container images, publish these images to Docker Registry, and deploy them to a Kubernetes cluster.
  • Synchronizes files in the repository with the working directory in the container.
  • Automatically tests using container-structure-test.
  • Forwards ports.
  • Reads the logs of the application running in the container.
  • Assists in debugging applications written in Java, Node.js, Python, Go.

Now, regarding the features:

  • Skaffold itself has no components on the cluster side. This means that no additional configuration of Kubernetes is required to use this utility.
  • Different pipelines for your application. Need to deploy code to a local Minikube while developing, and then to stage or production? This is provided for. profiler og og brukerkonfigurasjoner, miljĂžvariabler og flagg, som lar deg beskrive forskjellige pipelines for Ă©n applikasjon.
  • I cli-runtime og kubectl. Bare et kommandolinjeverktĂžy og konfigurasjoner i YAML. PĂ„ nettet kan man finne omtaler av forsĂžk pĂ„ Ă„ lage et eksperimentelt GUI, men per nĂ„ betyr dette mest at det er behov for det, men ikke mye mer.
  • Modularitet. Skaffold er ikke en selvstendig kombinasjonsverktĂžy, men prĂžver Ă„ bruke separate moduler eller allerede eksisterende lĂžsninger for spesifikke oppgaver.

Illustrasjon av det siste:

  • I byggefasen kan du bruke:
    • docker build lokalt, i et klynge ved hjelp av kaniko, eller i Google Cloud Build;
    • Bazel lokalt;
    • Jib Maven og Jib Gradle lokalt eller i Google Cloud Build;
    • tilpassede build-skript som kjĂžres lokalt. Hvis du har behov for Ă„ kjĂžre en annen (mer fleksibel/vanlig/
) byggelĂžsning, beskrives det i skriptet slik at Skaffold kjĂžrer akkurat den (eksempel fra dokumentasjonen). Dette lar deg bruke hvilken som helst byggverktĂžy som kan kalles fra et skript;
  • I testfasen stĂžttes den allerede nevnte container-structure-test;
  • For distribusjon finnes:
    • Kubectl;
    • Helm;
    • kustomize.

Dermed kan Skaffold beskrives som en slags rammeverk for CI/CD. Her er et eksempel pÄ arbeidsflyten ved bruk (fra prosjektets dokumentasjon):

Oversikt over Skaffold for utvikling pÄ Kubernetes

Hvordan ser arbeidet til Skaffold generelt ut?

  1. VerktĂžyet overvĂ„ker endringer i katalogen med kildekoden. Hvis det gjĂžres modifikasjoner i filene, synkroniseres de med pod’en til applikasjonen i Kubernetes-klyngen. Hvis mulig — uten Ă„ bygge bildet pĂ„ nytt. I motsatt fall — bygges et nytt bilde.
  2. Det byggede bildet sjekkes med container-structure-test, merkes og sendes til Docker Registry.
  3. Deretter distribueres bildet — det rulles ut i Kubernetes-klyngen.
  4. Hvis kjÞringen ble initialisert med kommandoen skaffold dev, begynner vi Ä motta logger fra applikasjonen, og Skaffold venter pÄ endringer for Ä gjenta alle handlingene pÄ nytt.

Oversikt over Skaffold for utvikling pÄ Kubernetes
Illustrasjon av de viktigste trinnene i Skaffold

Praksis. La oss prĂžve Skaffold

For Ä demonstrere bruken av Skaffold tar jeg et eksempel fra GitHub-repositoriet til prosjektet. For Þvrig, der ogsÄ kan man finne en rekke andre eksempler som tar hensyn til forskjellige spesifikasjoner. Alle handlinger vil bli utfÞrt lokalt i Minikube. Installeringen er enkel og tar noen minutter, og for Ä komme i gang trenger du kubectl.

La oss installere Skaffold:

curl -Lo skaffold https://storage.googleapis.com/skaffold/releases/latest/skaffold-linux-amd64
chmod +x skaffold
sudo mv skaffold /usr/local/bin
skaffold version
v0.37.1

Vi kloner Skaffold-repositoriet med de nĂždvendige eksemplene:

git clone https://github.com/GoogleContainerTools/skaffold
cd skaffold/examples/microservices

Jeg valgte et eksempel med to pod-er, hvor hver inneholder en liten Go-applikasjon. Én applikasjon er frontend (leeroy-web), som videresender forespþrselen til den andre applikasjonen - backend (leeroy-app). La oss se hvordan dette ser ut:

~/.skaffold/examples/microservices # tree
.
├── leeroy-app
│   ├── app.go
│   ├── Dockerfile
│   └── kubernetes
│       └── deployment.yaml
├── leeroy-web
│   ├── Dockerfile
│   ├── kubernetes
│   │   └── deployment.yaml
│   └── web.go
├── README.adoc
└── skaffold.yaml
 
4 directories, 8 files

leeroy-app og leeroy-web inneholder Go-koden og enkle Dockerfiles for lokal bygging av denne koden:

~/.skaffold/examples/microservices # cat leeroy-app/Dockerfile
FROM golang:1.12.9-alpine3.10 as builder
COPY app.go .
RUN go build -o /app .
 
FROM alpine:3.10
CMD ["./app"]
COPY --from=builder /app .

Jeg vil ikke gÄ inn pÄ koden til applikasjonene - det er tilstrekkelig Ä vite at leeroy-web mottar forespÞrslene og videresender dem til leeroy-app. Derfor finnes det en tjeneste i filene Deployment.yaml kun for app (for intern ruting). Porten til pod-en web vil vi videresende for rask tilgang til applikasjonen.

Hvordan ser skaffold.yaml:

~/.skaffold/examples/microservices # cat skaffold.yaml
apiVersion: skaffold/v1beta13
kind: Config
build:
  artifacts:
    - image: leeroy-web
      context: ./leeroy-web/
    - image: leeroy-app
      context: ./leeroy-app/
deploy:
  kubectl:
    manifests:
      - ./leeroy-web/kubernetes/*
      - ./leeroy-app/kubernetes/*
portForward:
  - resourceType: deployment
    resourceName: leeroy-web
    port: 8080
    localPort: 9000

Her beskrives alle trinnene nevnt ovenfor. I tillegg til denne konfigurasjonen finnes det ogsÄ en fil med globale innstillinger - ~/.skaffold/config. Den kan redigeres manuelt eller via CLI - for eksempel slik:

skaffold config set --global local-cluster true

Denne kommandoen vil sette den globale variabelen local-cluster til verdien true, etter hvilket Skaffold ikke vil prÞve Ä 'pushe' bilder til et eksternt register. Hvis du utvikler lokalt, kan du bruke denne kommandoen for Ä lagre bilder ogsÄ lokalt.

La oss gÄ tilbake til skaffold.yaml:

  • I stadiet build vi angir at bildet skal bygges og lagres lokalt. NĂ„r byggingen fĂžrste gang kjĂžres, ser vi fĂžlgende:
    // т.Đș. Minikube ŃĐŸĐ·ĐŽĐ°Đ”Ń‚ ĐșластДр ĐČ ĐŸŃ‚ĐŽĐ”Đ»ŃŒĐœĐŸĐč ĐČĐžŃ€Ń‚ŃƒĐ°Đ»ŃŒĐœĐŸĐč ĐŒĐ°ŃˆĐžĐœĐ”,
    // ĐżŃ€ĐžĐŽĐ”Ń‚ŃŃ ĐżŃ€ĐŸĐœĐžĐșĐœŃƒŃ‚ŃŒ ĐČĐœŃƒŃ‚Ń€ŃŒ, Ń‡Ń‚ĐŸĐ±Ń‹ ĐœĐ°Đčто ĐŸĐ±Ń€Đ°Đ·Ń‹
    # minikube ssh
    $ docker images
    REPOSITORY                                TAG                                                                IMAGE ID            CREATED             SIZE 
    leeroy-app                                7d55a50803590b2ff62e47e6f240723451f3ef6f8c89aeb83b34e661aa287d2e   7d55a5080359        4 hours ago         13MB 
    leeroy-app                                v0.37.1-171-g0270a0c-dirty                                         7d55a5080359        4 hours ago         13MB
    leeroy-web                                5063bfb29d984db1ff70661f17d6efcc5537f2bbe6aa6907004ad1ab38879681   5063bfb29d98        5 hours ago         13.1MB
    leeroy-web                                v0.37.1-171-g0270a0c-dirty                                         5063bfb29d98        5 hours ago         13.1MB

    Som du kan se, har Skaffold automatisk tagget bildene. Forresten, flere taggingpolitikker stĂžttes.

  • Deretter er det angitt i konfigurasjonen context: ./leeroy-app/, dvs. konteksten som bildet bygges i.
  • I distribusjonsfasen bestemmes det at vi skal bruke kubectl og en maske for nĂždvendige manifester.
  • PortForward: pĂ„ samme mĂ„te som vi vanligvis dirigerer porter ved hjelp av kubectl port-forward, gir vi Skaffold instruksjoner for Ă„ kalle denne kommandoen. I dette tilfellet dirigeres lokal port 9000 til 8080 i Deployment med navnet leeroy-web.

Det er pÄ tide Ä starte skaffold dev: kommandoen vil opprette en vedvarende "tilbakemeldingsslÞyfe", dvs. den vil ikke bare bygge og distribuere alt til klyngen, men ogsÄ informere om tilstanden til podene akkurat nÄ, fÞlge med pÄ endringer og oppdatere tilstanden til podene.

Her er resultatet av oppstarten skaffold dev --port-forward ved rekonstruksjon:

Oversikt over Skaffold for utvikling pÄ Kubernetes

For det fĂžrste viser det seg at cache brukes. Videre – applikasjonen bygges, distribueres, porter dirigeres. Siden --port-forward, har Skaffold dirigert porten til web, som Ăžnsket, men app har dirigert etter eget skjĂžnn (valgt nĂŠrmeste ledige). Etter dette fĂ„r vi de fĂžrste loggene fra applikasjonene.

Skal vi sjekke funksjonaliteten?

~\/skaffold\/examples\/microservices # kubectl get po
NAME                          READY   STATUS    RESTARTS   AGE
leeroy-app-6998dfcc95-2nxvf   1\/1     Running   0          103s
leeroy-web-69f7d47c9d-5ff77   1\/1     Running   0          103s
~\/skaffold\/examples\/microservices # curl localhost:9000
leeroooooy app!!!

Vi modifiserer filen leeroy-app\/app.go — det gĂ„r noen sekunder
 og:

~\/skaffold\/examples\/microservices # kubectl get po
NAME                          READY   STATUS    RESTARTS   AGE
leeroy-app-ffd79d986-l6nwp    1\/1     Running   0          11s
leeroy-web-69f7d47c9d-5ff77   1\/1     Running   0          4m59s
~\/skaffold\/examples\/microservices # curl localhost:9000
leeroooooy Habr!!!

Samtidig viste Skaffold det samme i konsollen som fÞr, bortsett fra et poeng: det viste bare leeroy-app, ikke alt pÄ en gang.

Mer praksis

Det er ogsĂ„ verdt Ă„ nevne at nĂ„r du oppretter et nytt prosjekt, kan konfigurasjoner for Skaffold ‘bootstrap’ med kommandoen init, som er veldig praktisk. I tillegg kan du skrive flere konfigurasjoner: jobbe med standardkonfigurasjonen, og deretter utrulles til stage med kommandoen run (den samme prosessen som dev, men fĂžlger ikke med pĂ„ endringer), ved Ă„ bruke en annen konfigurasjon.

PĂ„ katacoda finnes det veiledningen med et eksempel som er enda enklere. Der tilbys det allerede en klar sandkasse med Kubernetes, applikasjonen og Skaffold. En utmerket mulighet hvis du er interessert i Ă„ prĂžve de grunnleggende tingene selv.

En av de mulige bruksomrÄdene for Skaffold er utvikling pÄ en ekstern klynge. Det er ikke alltid praktisk Ä kjÞre Minikube pÄ eget utstyr, og deretter deployere applikasjonen og vente pÄ at den fungerer som den skal... I sÄ fall lÞser Skaffold oppgaven utmerket, noe ingeniÞrene hos Reddit kan bekrefte, noe vi allerede har... skrevet lese i bloggen vÄr.

Og i denne publikasjonen fra Weaveworks kan du finne et eksempel pÄ hvordan du oppretter en pipeline for produksjon.

Konklusjon

Skaffold er et praktisk verktÞy for Ä bygge pipelines for deployering av applikasjoner i Kubernetes, primÊrt rettet mot utviklernes behov. Det er ganske enkelt Ä lage en "kort" pipeline som tar hensyn til utviklerens grunnleggende behov, men hvis Þnskelig kan man ogsÄ organisere mer omfattende prosesser. Som et av de illustrative eksemplene pÄ bruken av Skaffold i CI/CD-prosesser bringer sÄdan testprosjektet med 10 mikrotjenester som utnytter mulighetene i Kubernetes, gRPC, Istio og OpenCensus Tracing.

Skaffold har allerede fĂ„tt nesten 8000+ stjerner pĂ„ GitHub, utvikles av Google og inngĂ„r i GoogleContainerTools — sĂ„ det er, for Ăžyeblikket, alle grunner til Ă„ tro at prosjektet vil utvikle seg lenge og lykkelig.

P.S.

Also read in our blog:

Kilde: habr.com

KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere đŸ”„ KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere | ProHoster