Legacy-tjenester i din infrastruktur

Hei! Jeg heter Pasha Chernyak, jeg er hovedutvikler hos QIWI, og i dag vil jeg snakke om det uunngÄelige. Om Legacy.

La oss begynne med spĂžrsmĂ„let: hva er en Legacy-tjeneste? Er det en tjeneste som utvikleren ikke har vĂŠrt borti pĂ„ en uke/mĂ„ned/Ă„r? Eller er det en tjeneste som ble skrevet av en mindre erfaren programmerer, for eksempel av deg selv, men for et Ă„r siden? NĂ„ er du jo bedre og mer erfaren. Eller er det kanskje slik at Legacy-tjenesten er en tjeneste du har bestemt deg for aldri mer Ă„ kommittĂ© og stilltiende forbereder erstatningen for? Uansett, Ă„ la en slik tjeneste vĂŠre uten tilsyn og ikke oppdatere den — det er en tidsinnstilt bombe som kan gĂ„ av senere.

Legacy-tjenester i din infrastruktur

FÞr jeg gÄr over til hvordan vi i QIWI jobber med vÄre Legacy-tjenester, vil jeg fortelle om hvordan vi ryddet opp i tjenestene i Lommeboken. I to Är har jeg hatt ansvaret for driftsstabiliteten. Hvis det oppstÄr et problem, sÄ ringer de alltid fÞrst til meg. Jeg har vanligvis ikke mot nok til Ä ringe noen andre klokken 23:00, sÄ jeg mÄtte sette meg ned og lÊre meg alle tjenestene i vÄrt domene.

Men jeg, som enhver annen, liker Ä sove om natten, sÄ jeg prÞvde Ä finne ut av driften: «Folkens, hvorfor ringer dere meg?». Jeg fikk et ganske kortfattet svar som «Hvem annet?». Fordi jeg fikser tjenestene, og dessuten vet folk generelt ikke hvem de skal ringe.

Derfor, pÄ en av retrospektivene til backend-teamet i Lommeboken, bestemte vi oss for Ä lage en tabell med en liste over vÄre tjenester, mikrotjenester og monolitter i lommeboken, og hvem som er ansvarlig for dem. Tabeller er faktisk nyttige, innen rimelige grenser.

I tillegg til informasjonen om hvem som er ansvarlig for hva, var det svar pĂ„ spĂžrsmĂ„l som: hvem er eieren av tjenesten, hvem ansvarer for utviklingen, arkitekturen og livssyklusen. De som er ansvarlige for denne tjenesten — det er personer som kan fikse den om nĂždvendig. Tjeneste-eieren har rett til Ă„ legge til +2 i kommittene, og de ansvarlige mĂ„ ogsĂ„ vĂŠre til stede pĂ„ gjennomgangen fĂžr denne tjenesten tar imot en ny kommit.

Tida gikk, nye praksiser ble innfÞrt, som migrering til Kubernetes, ulike checkstyle, spotbugs, ktlint, tilstedevÊrelse av logger i Kibana, autodiscovery av tjenester i stedet for Ä spesifisere adresser direkte, og andre nyttige ting. Og overalt tillot vÄrt regneark oss Ä opprettholde relevansen til tjenestene vÄre. For oss er dette en sjekkliste som indikerer at denne tjenesten kan gjÞre dette, men mangler fortsatt Ä gjÞre det. Men vi gikk videre med forstÄelsen av at vi mangler informasjon om tjenestene vi overvÄker, hvor kildekoden for tjenesten er, hvor oppgavene for bygging kjÞrer i TeamCity, hvordan de distribueres, hvor kildekoden for end2end-testene oppbevares, bilder fra grooming om arkitekturen, om beslutningene som er tatt. Ideelt sett ville vi at all denne informasjonen skulle vÊre tilgjengelig et sted nÄr vi trenger det. Derfor ble regnearket vÄrt utgangspunkt for Ä sÞke etter informasjon.

Men QIWI, selv om det bevarer Änden til en oppstart, er et stort selskap. Vi har allerede vÊrt her i 12 Är, og teamene endrer seg: folk kommer og gÄr, nye team dannes. Og vi oppdaget flere tjenester pÄ vÄrt domene som ble arvet fra andre. Noe kom med utviklere fra andre team, noe hadde bare en indirekte tilknytning til lommeboken, sÄ tjenesten er nÄ pÄ vÄr regning. Hvorfor skulle vi bry oss om hva som fungerer og hvordan? Tjenesten fungerer jo, og vi har produktfunksjoner som mÄ implementeres.

Som det ofte skjer

Men pĂ„ et tidspunkt oppdager vi at tjenesten slutter Ă„ fungere, noe har gĂ„tt galt — hva gjĂžr vi i en slik situasjon? Tjenesten har rett og slett sluttet Ă„ fungere. Helt. Vi fikk vite om dette, for det fĂžrste tilfeldig, og for det andre, etter seks mĂ„neder. Slik skjer det. Det eneste vi visste var hvilke virtuelle maskiner tjenesten kjĂžrte pĂ„, hvor kildekoden lĂ„, og alt annet. Vi gjĂžr git clone og dykker ned i tankene til personen som skrev dette for flere Ă„r siden, men hva ser vi? Ingen av de vante Spring Boot-rammeverkene, selv om vi er vant til alt dette, vi har jo full stack og alt det der. Kanskje det finnes et Spring Framework der? Det gjĂžr det ikke.

Karren som skreiv alt dette, var stri og skreiv alt pĂ„ rein Java. Vanlege verktĂžy for utviklarar er ikkje til stades, og tanken kjem — vi burde kanskje skrive det om. Vi har jo mikrotjenester, og frĂ„ kvart toastsjern kjem den velkjente «Folkens, mikrotjenester er det dere treng!». Om noko ikkje fungerer, kan du roleg ta eit kva som helst sprĂ„k, og alt blir bra.

Poenget er at vi for Ăžyeblikket ikkje har ein oppdragsgivar som er ansvarleg for denna tenesta. Kva for forretningskrav hadde han, kva skal eigentleg denne tenesta gjere? Og tenesta er tett integrert i dine forretningsprosessar.

Og no, sei meg, kor enkelt er det Ă„ skrive om tenesta utan Ă„ vite kva forretningskrav som ligg til grunn? Tenesta loggar seg pĂ„ ein uforstĂ„eleg mĂ„te, om det finst metrikker er ukjent. Kva om dei finst — det er meir enn uklart. Og i tillegg inneheld tenesta eit stort antall klassar med uforstĂ„eleg forretningslogikk. Nokre ting gĂ„r inn i ein database som vi heller ikkje veit noko om ennĂ„.

Korleis skal vi begynne?

Med det mest logiske — med tilgjengelege testane. Der er det vanlegvis skrive noko logikk, og ein kan trekke konklusjonar om kva som skjer. No for tida er TDD populĂŠrt, men vi ser at det for fem Ă„r sidan var det nesten det same som no: det er nesten ikkje unit-testar, og dei vil ikkje fortelje oss noko som helst. Forutan kanskje at viss vi sjekkar noko, sĂ„ fĂ„r vi sjĂ„ korleis ein xml signerer seg med eit eller anna tilpassa sertifikat.

Vi klarte ikke Ä forstÄ koden, sÄ vi mÄtte begynne Ä se pÄ hva som skjedde pÄ virtuelt maskin. Vi Äpnet loggene fra tjenesten og fant en feil med http-klienten; det selvsignerte sertifikatet som var innebygd i appens ressurser, var utlÞpt. Vi tok kontakt med vÄre analytikere, de ba om et nytt sertifikat, som vi fikk utstedt, og tjenesten fungerer igjen. Det skulle man tro var alt. Eller var det ikke? Tjenesten fungerer fortsatt, og den utfÞrer en funksjon som er nÞdvendig for vÄr virksomhet. Vi har visse standarder for utvikling av applikasjoner, som dere sannsynligvis ogsÄ har. For eksempel, ikke lagre logger pÄ noden i en mappe, men oppbevar dem i et lagringssystem, slik som Elasticsearch, og se pÄ dem i Kibana. Man kan ogsÄ huske pÄ de gyldne mÄlerne. Dette inkluderer serverens last, antall forespÞrselen til tjenesten, om den lever eller ikke, og hvordan HealthCheck gÄr. I det minste vil disse mÄlerne hjelpe oss med Ä vite nÄr vi trygt kan ta den ut av drift og glemme den som en dÄrlig drÞm.

Hva gjĂžre

Derfor legger vi en sÄ gammel tjeneste inn i tabellen, og deretter begynner vi Ä lete etter frivillige blant utviklerne som vil ta seg av tjenesten og fÄ den i orden: skrive noe informasjon om tjenesten, legge til lenker til dashbordene i Grafana, til byggeoppgavene, og finne ut hvordan man ruller ut applikasjonen, man skal jo ikke kaste filer med ftp manuelt.

Det viktigste er hvor mye tid all denne nyttige frivillige aktiviteten vil ta? En sprint for en mer eller mindre erfaren utvikler, for eksempel i lÞpet av 20% teknisk gjeld. Og hvor mye tid gikk med til Ä forstÄ all den inngrodde logikken med Ä kommunisere med et statlig system, og bringe den over pÄ nyere teknologi? Jeg garanterer ikke for det, det kan ta en mÄned, eller kanskje to mÄneder med teamarbeid. Dette sier jeg basert pÄ erfaring med integrasjon med en ny tjeneste i nÄtiden.

Samtidig er det ingen forretningsverdi Ă„ hente ut — overhodet. Å ta tjenesten til stĂžtte og bruke litt tid pĂ„ det er greit. Men etter vĂ„re standarddans med tjenesten la vi den inn i tabellen, la til informasjon om den, og kanskje vil vi skrive den om en gang. Men akkurat nĂ„ mĂžter den vĂ„re standarder for hvordan tjenester skal fungere.

Som en oppsummering vil jeg gjerne skissere en plan for hva som skal gjĂžres med Legacy-tjenester.

Å skrive om legacy fra bunnen av er en dĂ„rlig idĂ©.
Erlend, du trenger ikke en gang Ä tenke pÄ det. Det er forstÄelig at man Þnsker det, og man kan se noen fordeler, men vanligvis er det ikke nÞdvendig for noen, inkludert deg selv.

Innholdsfortegnelse
Grav frem kildekodene til applikasjonene dine, lag en innholdsfortegnelse hvor du angir hva som ligger hvor og hvordan det fungerer. Inkluder ogsÄ en beskrivelse av prosjektet (et slags readme.md) for raskt Ä forstÄ hvor loggene og metrikkene ligger. Utvikleren som kommer til Ä hÄndtere dette etter deg vil bare takke deg.

ForstÄ domenet
Hvis du eier et domene, sĂžrg for Ă„ ha kontroll. Det hĂžres banalt ut, men ikke alle fĂžlger opp for at tjenestene er konsistente. Å jobbe etter en standard er faktisk mye enklere.

Kun registrerte brukere kan delta i undersÞkelsen. Logg inn, vÊr sÄ snill.

Hva gjĂžr du med din legacy?

  • 31.5%Jeg skriver det om fra bunnen av, det er mer riktig.

  • 52.6%Nesten det samme som deg.

  • 10.5%Vi har ingen legacy, vi er flinke.

  • 5.2%Jeg skriver i kommentarene.

38 brukere har stemt. 20 brukere har avholdt seg.

Kilde: habr.com

KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere đŸ”„ KjĂžp pĂ„litelig hosting for nettsteder med DDoS-beskyttelse, VPS VDS-servere | ProHoster