{"id":96515,"date":"2020-10-12T19:43:02","date_gmt":"2020-10-12T17:43:02","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/odyssey-roadmap-chto-eshhyo-my-hotim-ot-pulera-soedinenij-andrej-borodin-2019"},"modified":"2020-10-12T19:43:02","modified_gmt":"2020-10-12T17:43:02","slug":"odyssey-roadmap-chto-eshhyo-my-hotim-ot-pulera-soedinenij-andrej-borodin-2019","status":"publish","type":"post","link":"https:\/\/prohoster.info\/sv\/blog\/administrirovanie\/odyssey-roadmap-chto-eshhyo-my-hotim-ot-pulera-soedinenij-andrej-borodin-2019","title":{"rendered":"Odyssey roadmap: what else we want from the connection pooler. Andrey Borodin (2019)","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"Odyssey<\/p>\n

<\/p>\n

I rapporten ber\u00e4ttar Andrei Borodin hur de tog h\u00e4nsyn till erfarenheterna av att skala PgBouncer vid utformningen av en anslutningspoolare Odyssey<\/a><\/noindex>, hur de rullade ut det i produktion. Dessutom kommer vi att diskutera vilka funktioner i poolaren vi skulle vilja se i nya versioner: det \u00e4r viktigt f\u00f6r oss att inte bara t\u00e4cka v\u00e5ra egna behov, utan ocks\u00e5 att utveckla anv\u00e4ndarsamh\u00e4llet Odyssey<\/a><\/noindex>.<\/p>\n

<\/a><\/noindex><\/p>\n

Video:<\/p>\n

\n

\r\n \"Spela\r\n
<\/div>\r\n <\/div><\/center><\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

Hej alla! Jag heter Andrei. <\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

P\u00e5 Yandex arbetar jag med utveckling av open source-databaser. Och idag har vi \u00e4mnet ang\u00e5ende connection pooler. <\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

Om du vet hur man ben\u00e4mner connection pooler p\u00e5 svenska, s\u00e5 s\u00e4g g\u00e4rna till mig. Jag vill verkligen hitta en bra teknisk term som borde etableras i den tekniska litteraturen. <\/p>\n

<\/p>\n

\u00c4mnet \u00e4r ganska komplext, eftersom m\u00e5nga databaser har inbyggda connection poolers och man ens inte beh\u00f6ver k\u00e4nna till dem. Det finns s\u00e5klart konfigurationer som \u00e4r gemensamma, men det fungerar inte p\u00e5 samma s\u00e4tt i Postgres. Samtidigt (p\u00e5 HighLoad++ 2019) h\u00e5lls en presentation av Nikolay Samokhvalov om att optimera fr\u00e5gor i Postgres. Jag f\u00f6rst\u00e5r att h\u00e4r har kommit personer som redan har optimerat sina fr\u00e5gor perfekt, och dessa personer st\u00e4lls inf\u00f6r mer s\u00e4llsynta systemproblem kopplade till n\u00e4tverk och resursutnyttjande. Ibland kan det vara ganska sv\u00e5rt eftersom problemen \u00e4r otydliga.<\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

P\u00e5 Yandex finns Postgres. I Yandex.Cloud lever m\u00e5nga av Yandex tj\u00e4nster. Vi har flera petabyte data som genererar minst en miljon fr\u00e5gor per sekund i Postgres. <\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

Och vi tillhandah\u00e5ller en ganska typisk kluster f\u00f6r alla tj\u00e4nster \u2013 det \u00e4r den prim\u00e4ra noden, vanliga tv\u00e5 repliker (synkron och asynkron), backup, och skalning av l\u00e4sfr\u00e5gor p\u00e5 repliken. <\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

Varje nod i klustret \u00e4r en Postgres som f\u00f6rutom Postgres och system\u00f6vervakning ocks\u00e5 har en connection pooler installerad. Connection poolern anv\u00e4nds f\u00f6r fencing och i sitt grundl\u00e4ggande syfte. <\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

Vad \u00e4r det grundl\u00e4ggande syftet med connection poolern? <\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

I Postgres anv\u00e4nds en processmodell f\u00f6r att arbeta med databasen. Det betyder att en anslutning \u00e4r en process, en Postgres-backend. Och i denna backend finns det m\u00e5nga olika cachar som \u00e4r ganska dyra att skapa olika f\u00f6r olika anslutningar. <\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

Dessutom finns det en array i Postgres-koden som kallas procArray. Den inneh\u00e5ller grundl\u00e4ggande data om n\u00e4tverksanslutningar. N\u00e4stan alla algoritmer f\u00f6r att bearbeta procArray har linj\u00e4r komplexitet, de g\u00e5r igenom hela arrayen av n\u00e4tverksanslutningar. Det \u00e4r en ganska snabb loop, men med ett stort antal inkommande n\u00e4tverksanslutningar blir det lite dyrare. Och n\u00e4r allt blir lite dyrare kan man till slut betala ett mycket h\u00f6gt pris f\u00f6r ett stort antal n\u00e4tverksanslutningar. <\/p>\n

<\/p>\n

\"Odyssey<\/p>\n

<\/p>\n

Det finns tre m\u00f6jliga tillv\u00e4gag\u00e5ngss\u00e4tt:<\/p>\n

<\/p>\n