Vi har Postgres där, men jag vet inte vad jag ska göra med det.

Detta är ett citat från en av mina bekanta som för länge sedan kontaktade mig med en fråga om Postgres. Då löste vi hans problem på några dagar och efter att ha tackat mig tillsatte han: "Det är bra när man har en bekant DBA."

Men vad gör man om man inte har en bekant DBA? Det finns många svarsalternativ, allt från att fråga bland vänner till att studera frågan själv. Men oavsett vilket svar som dyker upp i ditt huvud, så har jag goda nyheter för dig. I testläge har vi lanserat en rekommendationstjänst för Postgres och allt som rör sig kring det. Vad är detta och hur kom vi hit?

Varför allt detta?

Postgres är åtminstone inte enkelt, och ibland väldigt komplicerat. Det beror på graden av engagemang och ansvar.

För dem som jobbar med operationer är det viktigt att se till att Postgres fungerar korrekt och stabilt – övervaka resursutnyttjande, tillgänglighet, adekvat konfiguration, och regelbundet genomföra uppdateringar och hälsokontroller. För dem som är utvecklare och skriver applikationer är det viktigt att övervaka hur applikationen interagerar med databasen och se till att den inte orsakar nödsituationer som kan krascha databasen. Om en person har oturen att vara tech lead/tech director är det viktigt att Postgres fungerar pålitligt, förutsägbart och inte orsakar problem, utan att man behöver fördjupa sig djupt och länge i Postgres.

I varje sådant fall finns du och Postgres. För att på ett bra sätt underhålla Postgres behöver du förstå hur den fungerar. Om Postgres inte är din direkta specialisering kan det ta mycket tid att lära sig. I det ideala fallet, när det finns tid och vilja, är det inte alltid klart var man ska börja, hur och vart man ska gå.

Även om man omger sig med övervakning, som i teorin ska underlätta drift, kvarstår behovet av expertkunskaper. För att kunna läsa och förstå grafer måste man fortfarande ha en bra förståelse för hur Postgres fungerar. Annars förvandlas all övervakning till tråkiga bilder och spam från varningsmeddelanden vid osannolika tider på dygnet.

Vapen är precis utformad för att underlätta användningen av Postgres. Tjänsten samlar in och analyserar data om Postgres och ger rekommendationer om vad som kan förbättras.

Tjänstens huvudmål är att ge tydliga rekommendationer som ger en förståelse för vad som händer och vad som bör göras härnäst.

För specialister utan expertkunskaper ger rekommendationerna en utgångspunkt för att förbättra sina kunskaper. För avancerade specialister pekar rekommendationerna på de aspekter som bör uppmärksammas. I det avseendet fungerar Weaponry som en assistent som sköter rutinuppgifter för att identifiera problem eller brister som kräver särskild uppmärksamhet. Weaponry kan jämföras med en linter som kontrollerar Postgres och pekar på brister.

Hur läget ser ut nu

För närvarande Vapen är i testläge och gratis, registreringen är för tillfället temporärt begränsad. Tillsammans med flera volontärer finslipar vi rekommendationsmotorn på nästan produktionsklara databaser, identifierar falska positiva och arbetar med texten i rekommendationerna.

För övrigt är rekommendationerna ganska raka — de säger enkelt vad och hur man ska göra, utan ytterligare detaljer — så de första gångerna får man gå via relaterade länkar, eller googla mer. Kontroller och rekommendationer omfattar system- och hårdvaruinställningar, inställningar av själva Postgres, den interna schemat och de resurser som används. Det finns fortfarande många saker som ska läggas till.

Och förstås är vi på jakt efter volontärer som är villiga att testa tjänsten och ge feedback. Vi har också demoversioner, som du kan gå in och titta på. Om du förstår att detta är något för dig och är redo att prova, kontakta oss på e-post.

Uppdaterad 2020-09-16. Komma igång.

Efter registrering ombeds användaren att skapa ett projekt — vilket gör det möjligt att gruppera databasinstanser. När projektet har skapats, leds användaren till en instruktion om hur man konfigurerar och installerar agenten. Kort sagt, måste man skapa användare för agenten, hämta installationsskriptet för agenten och köra det. I kommandoraden ser detta ut ungefär så här:

psql -c "CREATE ROLE pgscv WITH LOGIN SUPERUSER PASSWORD 'A7H8Wz6XFMh21pwA'"
export PGSCV_PG_PASSWORD=A7H8Wz6XFMh21pwA
curl -s https://dist.weaponry.io/pgscv/install.sh |sudo -E sh -s - 1 6ada7a04-a798-4415-9427-da23f72c14a5

Om det finns en pgbouncer på värden, måste en användare också skapas för att ansluta agenten. Det specifika sättet att konfigurera en användare i pgbouncer kan variera mycket och beror starkt på den använda konfigurationen. I allmänhet består konfigurationen av att lägga till användaren i stats_users konfigurationsfilen (vanligtvis pgbouncer.ini) och ange lösenordet (eller dess hash) i filen som anges av parametern auth_file. Vid ändring av stats_users krävs en omstart av pgbouncer.

Installationsskriptet install.sh tar emot ett par obligatoriska argument som är unika för varje projekt och genom miljövariabler tar det emot uppgifterna för de skapade användarna. Skriptet startar sedan agenten i bootstrap-läge — agenten kopierar sig själv till PATH, skapar en konfiguration med uppgifterna, en systemd-enhet och startar som en systemd-tjänst.
Installation är nu klar. Inom ett par minuter kommer databasinternationen att dyka upp i listan över värdar i gränssnittet och man kan redan se de första rekommendationerna. Men en viktig punkt är att många rekommendationer kräver ett stort antal ackumulerade mätvärden (åtminstone under ett dygn).

Källa: habr.com