Istio og Kubernetes i produksjon. Del 2. Sporing

Tidligere artikkelen Vi har sett pÄ de grunnleggende komponentene i Service Mesh Istio, blitt kjent med systemet og svart pÄ de viktigste spÞrsmÄlene som vanligvis oppstÄr i begynnelsen av arbeidet med Istio. I denne delen vil vi se pÄ hvordan vi kan organisere innsamlingen av tracing-informasjon over nettverket.

Istio og Kubernetes i produksjon. Del 2. Sporing

Det fÞrste som mange utviklere og systemadministratorer tenker pÄ nÄr de hÞrer ordene Service Mesh, er tracing. Og faktisk, vi legger til en spesialproxyserver i hver node i nettverket, gjennom hvilken all TCP-trafikk gÄr. Det ser ut til at vi nÄ enkelt kan sende informasjon om alle nettverksinteraksjoner i nettverket. Dessverre dukker det opp mange nyanser i virkeligheten som mÄ tas i betraktning. La oss se pÄ dem.

MisforstÄelse nummer én: vi kan gratis fÄ data om nettverksrunder

Faktisk kan vi bare relativt gratis fÄ tilknyttede noder i systemet vÄrt og rate pÄ data som gÄr mellom tjenestene (i hovedsak bare antall byte per tidsenhet). Men i de fleste tilfeller kommuniserer tjenestene vÄre via et applikasjonsprotokoll som HTTP, gRPC, Redis osv. Og selvfÞlgelig Þnsker vi Ä se tracing-informasjonen nettopp for disse protokollene, vi Þnsker Ä se rate for forespÞrslene, ikke dataene. Vi vil forstÄ forespÞrselens latency via vÄr protokoll. Til slutt Þnsker vi Ä se den fullstendige stien forespÞrselen tar fra inngangen til systemet vÄrt til svaret blir mottatt av brukeren. Denne oppgaven er ikke sÄ enkel Ä lÞse.

La oss fÞrst se pÄ hvordan sending av tracing spans ser ut fra et arkitekturmessig perspektiv i Istio. Som vi husker fra del én, har Istio en egen komponent for innsamling av telemetri, som kalles Mixer. Men i nÄvÊrende versjon 1.0.* utfÞres sendingen direkte fra proxy-serverne, nemlig fra envoy proxy. Envoy proxy stÞtter sending av tracing spans via zipkin-protokollen ut av boksen. Andre protokoller kan integreres, men kun gjennom et plugin. Med Istio fÄr vi straks en samlet og konfigurert envoy proxy, som kun stÞtter zipkin-protokollen. Hvis vi Þnsker Ä bruke for eksempel Jaeger-protokollen og sende tracing spans over UDP, mÄ vi bygge vÄrt eget istio-proxy-bilde. StÞtten for tilpassede plugins for istio-proxy er tilgjengelig, men er fremdeles i alpha-versjon. Derfor, hvis vi Þnsker Ä unngÄ et stort antall tilpassede innstillinger, reduseres utvalget av teknologier for lagring og mottak av tracing spans. Blant de viktigste systemene kan vi nÄ i hovedsak bruke selve Zipkin eller Jaeger, men sende alt dit med en zipkin-kompatibel protokoll (som er betydelig mindre effektiv). Selve zipkin-protokollen forutsetter sending av all tracing-informasjon til samlere via HTTP-protokollen, noe som er ganske ressurskrevende.

Som jeg allerede har sagt, Þnsker vi Ä trace applikasjonsprotokoller. Dette betyr at proxy-serverne som stÄr ved siden av hver tjeneste, mÄ forstÄ hvilken type interaksjon som skjer nÄ. Som standard konfigurerer Istio alle porter til plain TCP-type, noe som betyr at ingen traces vil sendes. For at traces skal bli sendt, mÄ man fÞrst aktivere en slik opsjon i hoved mesh-konfigurasjonen, og det er ogsÄ veldig viktig Ä navngi alle porter ved service-enhetene i Kubernetes i samsvar med protokollen som brukes i tjenesten. SÄ for eksempel slik:

apiVersion: v1
kind: Service
metadata:
  name: nginx
spec:
  ports:
  - port: 80
    targetPort: 80
    name: http
  selector:
    app: nginx

Det er ogsÄ mulig Ä bruke sammensatte navn, som http-magic (Istio vil se http og gjenkjenne denne porten som en http-endepunkt). Formatet er slik: proto-extra.

For Ä unngÄ Ä mÄtte patch et stort antall konfigurasjoner for Ä bestemme protokollen, kan man bruke en lite elegant workaround: patch Pilot-komponenten i det Þyeblikket den akkurat utfÞrer logikken for Ä bestemme protokollen. Til slutt mÄ denne logikken endres til en standard og navnekonvensjon for alle porter mÄ fÞlges.

For Ä virkelig forstÄ om protokollen er definert korrekt, mÄ man gÄ inn i en hvilken som helst av sidecar-containerne med envoy-proxy og gjÞre en forespÞrsel til porten for admin-grensesnittet til envoy pÄ sted /config_dump. I den resulterende konfigurasjonen mÄ man se pÄ feltet operasjon for den aktuelle tjenesten. Dette brukes i Istio som en identifikator for hvor forespÞrselen sendes. For Ä tilpasse dette parameteret i Istio (vi vil deretter se det i vÄrt tracing-system), mÄ man ved oppstart av sidecar-containeren angi flagget serviceCluster. For eksempel kan det beregnes pÄ denne mÄten ved Ä bruke variabler fra downward API Kubernetes:

--serviceCluster ${POD_NAMESPACE}.$(echo ${POD_NAME} | sed -e 's/-[a-z0-9]*-[a-z0-9]*$//g')

Et godt eksempel for Ä forstÄ hvordan tracing fungerer i envoy, er here.

Selve endpointen for Ä sende tracing spans mÄ ogsÄ angis i flaggene for oppstart av envoy-proxy, for eksempel: --zipkinAddress tracing-collector.tracing:9411

Myte nummer to: vi kan billig og enkelt fÄ komplette tracer av forespÞrslers gang gjennom systemet ut av boksen.

Dessverre er ikke dette tilfelle. Vanskelighetsgraden av implementeringen avhenger av hvordan samspillet mellom tjenestene allerede er implementert. Hvorfor er det slik?

Poenget er at for at istio-proxy skal kunne forstÄ forholdet mellom innkommende forespÞrsel til tjenesten og utgÄende forespÞrsel fra samme tjeneste, er det ikke nok Ä bare fange all trafikk. Man mÄ ha en eller annen identifikator for forbindelsen. I HTTP envoy-proxy brukes spesielle overskrifter som lar envoy forstÄ hvilken spesifikk forespÞrsel til tjenesten som forÄrsaker bestemte forespÞrsel til andre tjenester. Listen over slike overskrifter inkluderer:

  • x-request-id,
  • x-b3-traceid,
  • x-b3-spanid,
  • x-b3-parentspanid,
  • x-b3-sampled,
  • x-b3-flags,
  • x-ot-span-context.

Hvis du har et sentralt punkt, for eksempel en grunnleggende klient, der man kan legge til slik logikk, er det flott, da trenger man bare vente pÄ oppdateringen av dette biblioteket hos alle klientene. Men dersom du har et veldig heterogent system uten enhetlighet i bevegelsen fra tjenester til tjenester i nettverket, kan dette sannsynligvis bli et stort problem. Uten Ä legge til slik logikk vil all tracing-informasjon vÊre "ettlags". Det vil si at vi fÄr alle mellomtjenestekontakter, men de vil ikke vÊre koblet sammen i enhetlige kjeder gjennom nettverket.

Konklusjon

Istio gir en brukervennlig verktÞy for Ä samle inn tracing-informasjon fra nettverket, men det er viktig Ä forstÄ at implementeringen krever tilpasning av systemet og hensyn til spesifikasjonene til Istio. Til slutt mÄ to hovedpunkter lÞses: fastsettelse av applikasjonsprotokollen (som mÄ stÞttes av envoy proxy) og konfigurering av hvordan informasjon om sammenhengen mellom forespÞrslene overfÞres fra tjeneste til tjeneste (ved hjelp av header, i tilfelle HTTP-protokollen). NÄr disse spÞrsmÄlene er lÞst, fÄr vi et kraftig verktÞy som kan samle inn nettverksinformasjon pÄ en gjennomsiktig mÄte, selv i svÊrt heterogene systemer skrevet i mange forskjellige sprÄk og rammeverk.

I den neste artikkelen om Service Mesh vil vi se pĂ„ et av de stĂžrste problemene med Istio – det hĂžye minneforbruket til hver sidecar proxy-container, og diskutere hvordan vi kan takle det.

Kilde: habr.com

KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere đŸ”„ KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere | ProHoster