Lever databaser i Kubernetes?

Lever databaser i Kubernetes?

Det har historisk sett blitt slik at IT-industrien deler seg i to leire: de som er "for" og de som er "imot". Temaene for diskusjon kan vÊre helt vilkÄrlige. Hvilket operativsystem er best: Win eller Linux? Skal man ha smarttelefon med Android eller iOS? Skal alt lagres i skyen eller pÄ kalde RAID-lagringer med harddiskene i safen? Har PHP-utviklere rett til Ä kalle seg programmerere? Disse debattene har til tider et for mange eksistensielt preg og baseres ikke pÄ noe annet enn sportslig interesse.

SÄ har det seg at med fremveksten av containere og denne elskede kjÞkkenet vÄrt med Docker og Kubernetes begynte debattene "for" og "imot" bruken av nye muligheter i ulike omrÄder av backend. (For Ä presisere, er det vanligvis Kubernetes som nevnes som orkestrator, men valget av dette spesifikke verktÞyet har ikke prinsipielle betydning. Du kan bruke hvilket som helst annet verktÞy du synes er mest praktisk og behagelig.)

Og det kan se ut som om dette var en enkel debatt mellom to sider av samme mynt. Like meningslÞs og ubarmhjertig som det evige motsetningen mellom Win vs Linux, hvor fornuftige mennesker faktisk finnes et sted i midten. Men i tilfelle av containerisering er ikke alt sÄ enkelt. Vanligvis finnes det ikke en "riktig" side i slike debatter, men i tilfelle av "bruke" eller "ikke bruke" containere for databaselagring blir alt snudd pÄ hodet. Fordi pÄ en viss mÄte har bÄde tilhengere og motstandere av en slik tilnÊrming rett.

Den Lyse Siden

Å oppsummere argumentasjonen til Den Lyse Siden kan gjĂžres med en setning: “Hallo, 2k19 utenfor!” Det hĂžres ut som populisme, uten tvil, men hvis man ser nĂŠrmere pĂ„ situasjonen, er det fordeler. De skal vi nĂ„ gĂ„ gjennom.

La oss anta at du har et stort webprosjekt. Det kan ha vĂŠrt bygget pĂ„ grunnlag av en mikrotjeneste-tilnĂŠrming fra starten av, eller det kan ha utviklet seg mot det gjennom en evolusjonĂŠr prosess – det er egentlig ikke sĂ„ viktig. Du har delt prosjektet vĂ„rt opp i separate mikrotjenester, konfigurert orkestreringen, lastbalanseringen og skaleringen. Og nĂ„ nyter du med god samvittighet en mojito i hengekĂžyen under Hubba-effektene i stedet for Ă„ hĂ„ndtere nedlagte servere. Men man mĂ„ vĂŠre konsekvent i alle handlinger. Ofte containeriseres bare selve applikasjonen – koden. Men hva annet har vi utover koden?

Riktig, data. Hjertet i ethvert prosjekt er dataene: dette kan vĂŠre en typisk databasesystem — MySQL, PostgreSQL, MongoDB, samt lagringssystemer for sĂžk (Elasticsearch), key-value lagringssystemer for caching — for eksempel Redis, osv. NĂ„ skal vi ikke snakke om dĂ„rlige backend-implementeringer der databasen krasjer pĂ„ grunn av dĂ„rlig skrevne spĂžrringer, men i stedet diskutere hvordan man sikrer tilgjengeligheten til denne databasen under klientbelastning. For nĂ„r vi containeriserer applikasjonen vĂ„r og lar den skalere fritt for Ă„ hĂ„ndtere et hvilket som helst antall innkommende forespĂžrselene, Ăžker dette naturlig belastningen pĂ„ databasen.

Faktisk blir tilgangen til databasen og serveren den kjĂžrer pĂ„ en flaskehals i vĂ„r vakre containeriserte backend. Den viktigste motivasjonen bak containervirtualisering er mobilitet og fleksibilitet i strukturen, som gjĂžr det mulig Ă„ organisere distribusjonen av topplasten mest mulig effektivt pĂ„ all tilgjengelig infrastruktur. Det vil si, hvis vi ikke containeriserer og distribuerer alle systemelementene i klyngen – begĂ„r vi en veldig alvorlig feil.

Det er mye mer logisk Ă„ klusterere ikke bare selve applikasjonen, men ogsĂ„ tjenestene som hĂ„ndterer datalagring. NĂ„r vi klusterer og distribuerer uavhengige og lastbalanserende nettservere i k8s, lĂžser vi allerede problemet med datasykronisering — for eksempel kommentarer til innlegg, hvis vi tar et mediehus eller en bloggplattform som eksempel. Vi fĂ„r uansett et internt klusterrepresentasjon av databasen, selv om det er virtuelt, som ExternalService. SpĂžrsmĂ„let er at databasen i seg selv ennĂ„ ikke er klusterert — de distribuerte nettserverne henter informasjon om endringer fra vĂ„r statiske produksjonsdatabase, som kjĂžrer separat.

FĂžler du en felle? Vi bruker k8s eller Swarm for Ă„ fordele lasten og unngĂ„ nedetid pĂ„ hovedsystemet, webserveren, men vi gjĂžr ikke dette for databasen. Men hvis databasen faller, sĂ„ gir det ingen mening i vĂ„r klustererte infrastruktur — hva hjelper oss tomme nettsider som returnerer feil ved tilgang til databasen?

Akkurat derfor mĂ„ vi klusterere ikke bare nettserverne, som vanligvis gjĂžres, men ogsĂ„ databasens infrastruktur. Bare pĂ„ denne mĂ„ten kan vi sikre en fullt fungerende struktur som jobber sammen, men samtidig er uavhengige av hverandre. Selv om halvparten av backend-en vĂ„r «kollapser» under belastning, vil resten overleve, og systemet for databasens synkronisering internt i klyngen og muligheten for ubegrenset skalering og distribusjon av nye klynger vil hjelpe oss med raskt Ă„ nĂ„ nĂždvendige ressurser — sĂ„ lenge det finnes rack i datasenteret.

I tillegg gjÞr den distribuerte klustermodellen for databasen det mulig Ä flytte denne databasen dit den er nÞdvendig; hvis vi snakker om en global tjeneste, er det ganske ulogisk Ä kjÞre et nettkluster et sted i San Francisco og samtidig sende datapakker nÄr man henvender seg til databasen i Moskva-regionen og tilbake.

Containervirksomhet for databasen gjĂžr det mulig Ă„ bygge alle systemets elementer pĂ„ et nivĂ„ av abstraksjon. Dette gjĂžr det igjen mulig Ă„ administrere systemet direkte fra koden av utviklerne, uten aktiv involvering av administratorer. Utviklerne tenkte at de trengte en egen DBMS for et nytt delprosjekt — lett! de skrev en yaml-fil, lastet den opp til klyngen, og sĂ„ var det klart.

Og selvfĂžlgelig forenkles intern drift betraktelig. Si meg, hvor mange ganger har du lukket Ăžynene nĂ„r et nytt teammedlem har stikket hendene inn i den operative databasen? Som dere, i realiteten, kun har Ă©n av, og som snurrer akkurat nĂ„? SelvfĂžlgelig er vi alle voksne her, og vi har et ferskt sikkerhetskopi et sted, og lenger bak — bak hyllen med bestemor sine sylteagurker og gamle ski — er det nok et sikkerhetskopi, kanskje til og med pĂ„ kald lagring, for en gang brant kontoret deres. Likevel, hver gang et nytt teammedlem fĂ„r tilgang til den operative infrastrukturen og selvsagt til den operative databasen — er det en bĂžtte med beroligende midler for alle rundt. Hvem vet, kanskje han er klĂžnete? Skummelt, er det ikke?

Containerisering og i bunn og grunn den distribuerte fysiske topologien til databasen i prosjektet ditt bidrar til Ă„ unngĂ„ slike stressende Ăžyeblikk. Stoler du ikke pĂ„ nykommeren? Greit! La oss sette opp hans egen klynge for arbeid og koble den fra de andre databasene — synkronisering kun ved manuell pushing og synkron tildeling av to nĂžkler (den ene til teamlederen, den andre til administratoren). Og alle er glade.

Og nÄ er det pÄ tide Ä skifte standpunkt og bli motstander av databasetilgjengelighet.

Den mĂžrke siden

NÄr vi diskuterer hvorfor man ikke bÞr containerisere databasen og fortsette Ä kjÞre den pÄ en sentral serveren, la oss ikke synke til retorikken til ortodokse og pÄstandene som sier «vÄre forfedre kjÞrte databaser pÄ maskinvare, og det skal vi ogsÄ!» I stedet la oss prÞve Ä komme opp med en situasjon der containerisering faktisk ville gitt reelle fordeler.

Enig, det finnes ikke mange prosjekter som virkelig trenger en database i en container, og man kan telle dem pĂ„ en hĂ„nd til en ikke sĂ„ dyktig freser. I de fleste tilfeller kan til og med bruken av k8s eller Docker Swarm vĂŠre overflĂždig — ofte tyr man til disse verktĂžyene pĂ„ grunn av den generelle hype rundt teknologiene og pĂ„trykket fra «de hĂžyeste» i form av ledelsen til Ă„ putte alt i skyene og containerne. Fordi det nĂ„ er trendy, og alle gjĂžr det.

I mange tilfeller er bruken av Kubernetes eller bare Docker i et prosjekt overflÞdig. Problemet er at ikke alle team eller outsourcing-selskaper som er ansatt for Ä vedlikeholde kundens infrastruktur, er bevisste pÄ dette. Det er enda verre nÄr containere pÄfÞres fordi det genererer en viss kostnad for kunden.

Det er en utbredt oppfatning at Docker/kube-mafian rett og slett undergraver klienter som outsourcer disse infrastrukturspĂžrsmĂ„lene. For Ă„ jobbe med klynger, kreves det ingeniĂžrer som er i stand til Ă„ gjĂžre det og forstĂ„r arkitekturen til den implementerte lĂžsningen. Vi har allerede beskrevet vĂ„r sak med publikasjonen Republic — der lĂŠrte vi kundens team Ă„ jobbe i Kubernetes-realiteter, og alle var fornĂžyde. Det var en betydelig prestasjon. Ofte tar imidlertid "implementatorer" av k8s kundens infrastruktur som gisler—nĂ„ forstĂ„r bare de hvordan alt fungerer, og det finnes ingen spesialister hos kunden.

Tenk nĂ„ pĂ„ at vi pĂ„ denne mĂ„ten ikke bare gir bort webserverdelen til outsourcing, men ogsĂ„ vedlikehold av databasen. Vi har sagt at databasen er hjertet, og Ă„ miste hjertet er fatalt for enhver levende organisme. Kort sagt, utsiktene er ikke de beste. SĂ„ i stedet for det hypede Kubernetes, burde mange prosjekter bare investere i en rimelig AWS-plan, som lĂžser alle problemer med belastning pĂ„ nettstedet/prosjektet deres. Men AWS er ikke lenger trendy, og dessverre er status dyrere enn penger—og det gjelder ogsĂ„ i IT-miljĂžet.

Ok. Kanskje klyngedrift virkelig er nĂždvendig for prosjektet, men hvis alt er klart med stateless-applikasjoner, hvordan skal man da organisere tilstrekkelig nettverksforbindelse til en klyngedatabase?

NÄr vi snakker om en sÞmlÞs ingeniÞrlÞsning som overgangen til k8s, er vÄr stÞrste bekymring replikasjon av data i en klyngedatabasen. Noen databaser er ganske vennlige mot fordeling av data mellom sine egne instanser fra starten av. Mange andre er ikke sÄ mottakelige. Ofte blir det viktigste argumentet for valg av database til prosjektet vÄrt ikke evnen til Ä replikere med minimale ressursbruk og ingeniÞrkostnader. Spesielt hvis prosjektet opprinnelig ikke ble planlagt som mikrotjeneste, men utviklet seg i den retningen.

Vi trenger vel ikke Ă„ forklare hvor sakte nettverksdiskene er — de er tregere. Det vil si at vi, i tilfelle noe skjer, ikke har mulighet til Ă„ rive opp en database-instans et sted med for eksempel mer prosesseringskraft eller ledig RAM. Vi vil raskt stĂžte pĂ„ ytelsen til den virtualiserte diskunderstĂžttelsen. Dermed mĂ„ databasen vĂŠre knyttet til sitt personlige sett av maskiner som er i umiddelbar nĂŠrhet. Alternativt mĂ„ vi finne en rask synkroniseringslĂžsning for Ă„ hĂ„ndtere eventuelle reserver.

NĂ„r det gjelder virtuelle filsystemer: Docker Volumes er dessverre ikke uten problemer. Generelt Ăžnsker vi Ă„ bruke sĂ„ enkle tekniske lĂžsninger som mulig for langsiktig pĂ„litelig datalagring. Å legge til et nytt abstraksjonslag fra beholderens filsystem til vertsoperativsystemets filsystem innebĂŠrer allerede en risiko. Men nĂ„r det ogsĂ„ oppstĂ„r problemer med datatransmisjon mellom disse lagene i containeriseringssystemet, blir det enda vanskeligere. For Ăžyeblikket har de fleste kjente problemer som menneskeheten stĂ„r overfor blitt lĂžst. Men som dere vet, jo mer komplisert mekanismen er, jo lettere er det Ă„ bryte den.

I lys av alle disse «eventyrene» er det mye mer gunstig og enklere Ä holde databasen pÄ ett sted. Selv om du har behov for Ä containerisere applikasjonen, la den stÄ pÄ egne ben og fÄ samtidig forbindelse med databasen gjennom en distribusjonsgateway, hvor data bare blir lest og skrevet pÄ ett sted. Denne tilnÊrmingen reduserer sannsynligheten for feil og desynkroniseringer til et minimum.

Hva er poenget? Poenget er at containerisering av databasen er relevant der det virkelig er nĂždvendig. Du kan ikke presse en databaselĂžsning med fullapplikasjon og kjĂžre den som om du hadde to dusin mikrotjenester – det fungerer ikke slik. Dette mĂ„ man ha en klar forstĂ„else av.

I stedet for utdata

Hvis du venter pÄ et klart svar om «Ä virtualisere eller ikke virtualisere databasen», mÄ jeg skuffe deg: det vil ikke bli gitt her. Fordi i utformingen av enhver infrastrukturomrÄde, mÄ man handle ut fra fornuft og ikke fÞlge trender og fremskritt.

Det finnes prosjekter hvor prinsipper og verktÞy som fÞlger med Kubernetes passer perfekt, og i slike prosjekter oppnÄs det fred, i det minste pÄ backend-omrÄdet. Og det finnes prosjekter som ikke trenger containerisering, men en normal serverinfrastruktur, fordi de prinsipielt ikke kan skaleres til en mikrotjenesteklynge-modell, da vil de falle.

Kilde: habr.com

KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere đŸ”„ KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere | ProHoster