{"id":96515,"date":"2020-10-12T19:43:02","date_gmt":"2020-10-12T17:43:02","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/odyssey-roadmap-chto-eshhyo-my-hotim-ot-pulera-soedinenij-andrej-borodin-2019"},"modified":"2020-10-12T19:43:02","modified_gmt":"2020-10-12T17:43:02","slug":"odyssey-roadmap-chto-eshhyo-my-hotim-ot-pulera-soedinenij-andrej-borodin-2019","status":"publish","type":"post","link":"https:\/\/prohoster.info\/it\/blog\/administrirovanie\/odyssey-roadmap-chto-eshhyo-my-hotim-ot-pulera-soedinenij-andrej-borodin-2019","title":{"rendered":"Roadmap di Odyssey: cosa vogliamo ancora dal connettore di pooling. Andrey Borodin (2019)","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"Roadmap<\/p>\n

<\/p>\n

Nel rapporto, Andrei Borodin parler\u00e0 di come hanno tenuto conto dell'esperienza di scalabilit\u00e0 di PgBouncer durante la progettazione del connection pooler. Odyssey<\/a><\/noindex>, come \u00e8 stato introdotto in produzione. Inoltre, discuteremo quali funzioni del pooler ci piacerebbe vedere nelle nuove versioni: \u00e8 importante per noi non solo soddisfare le nostre esigenze, ma anche sviluppare la comunit\u00e0 degli utenti. Odissea<\/a><\/noindex>.<\/p>\n

<\/a><\/noindex><\/p>\n

Video:<\/p>\n

\n

\r\n \"Guarda\r\n
<\/div>\r\n <\/div><\/center><\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

Ciao a tutti! Mi chiamo Andrei. <\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

In Yandex mi occupo dello sviluppo di database open source. Oggi parleremo del connection pooler. <\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

Se sai come si chiama il connection pooler in russo, fammelo sapere. Vorrei davvero trovare un buon termine tecnico che si affermi nella letteratura tecnica. <\/p>\n

<\/p>\n

L'argomento \u00e8 piuttosto complesso, perch\u00e9 in molti database il connection pooler \u00e8 integrato e non \u00e8 nemmeno necessario saperlo. Ci sono sicuramente alcune impostazioni ovunque, ma in Postgres non funziona cos\u00ec. Parallelamente, a HighLoad++ 2019, si svolger\u00e0 una presentazione di Nikolay Samokhvalov sulla configurazione delle query in Postgres. E da quello che capisco, sono venute persone che hanno gi\u00e0 configurato le query in modo impeccabile, e queste persone affrontano problemi sistemici pi\u00f9 rari, legati alla rete e all'utilizzo delle risorse. E a volte pu\u00f2 essere piuttosto complicato nel senso che i problemi non sono evidenti.<\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

In Yandex abbiamo Postgres. In Yandex.Cloud vivono molti servizi di Yandex. E abbiamo diversi petabyte di dati che generano non meno di un milione di richieste al secondo in Postgres. <\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

E forniamo un cluster piuttosto standard a tutti i servizi: \u00e8 il nodo primario principale, due repliche normali (una sincrona e una asincrona), backup e scaling delle query di lettura sulla replica. <\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

Ogni nodo del cluster \u00e8 un Postgres, su cui oltre a Postgres e ai sistemi di monitoraggio \u00e8 installato anche il connection pooler. Il connection pooler \u00e8 utilizzato per il fencing e per il suo scopo principale. <\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

Qual \u00e8 lo scopo principale del connection pooler? <\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

In Postgres si adotta un modello basato su processi quando si lavora con il database. Questo significa che una connessione \u00e8 un processo, un backend di Postgres. E in questo backend ci sono molti cache diversi, che \u00e8 piuttosto costoso avere diversi per diverse connessioni. <\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

Inoltre, nel codice Postgres c'\u00e8 un array chiamato procArray. Contiene le informazioni principali sulle connessioni di rete. E quasi tutti gli algoritmi che elaborano il procArray hanno una complessit\u00e0 lineare, poich\u00e9 attraversano tutto l'array delle connessioni di rete. Questo \u00e8 un ciclo abbastanza veloce, ma con un numero elevato di connessioni in entrata tutto diventa un po' pi\u00f9 costoso. Quando tutto diventa un po' pi\u00f9 costoso, alla fine si pu\u00f2 pagare un prezzo molto alto per un gran numero di connessioni di rete. <\/p>\n

<\/p>\n

\"Roadmap<\/p>\n

<\/p>\n

Esistono 3 approcci possibili:<\/p>\n

<\/p>\n