HTTP/TCP koormuse tasakaalustaja HAProxy 2.0 väljaanne

Avaldatud koormusbalansiirija väljaanne HAProxy 2.0, mis võimaldab jaotada HTTP-liiklust ja erinevaid TCP päringuid serverite rühma vahel, arvestades erinevaid tegureid (näiteks kontrollib serverite kättesaadavust, hindab koormust, on DDoS-i vastupanu meetmed) ja teeb algse andmete filtreerimise (näiteks on võimalik töödelda HTTP-pealkirju, filtreerida valede päringu parameetrite edastamist, blokeerida SQL süstimist ja XSS-i, lisada sisu töötlemise agente). HAProxy suudab samuti rakenduda koordineerida komponentide koostoimet mikroteenuste arhitektuuri süsteemides. Projekti kood on kirjutatud C program keeles ja toimetatakse on GPLv2 litsentsi alusel. Projekti kasutatakse paljude suurte veebisaitide, sealhulgas Airbnb, Alibaba, GitHub, Imgur, Instagram, Reddit, StackOverflow, Tumblr, Twitter ja Vimeo, poolt.

Väljalaske peamised omadused:

• Tutvustatud uus API Andmeplaan, mis võimaldab reaalajas hallata HAProxy seadeid REST Web API kaudu. Sealhulgas on võimalik dünaamiliselt lisada ja eemaldada tagapoolseid ja servereid, luua ACL-e, muuta päringute suunamist, muuta töötlejate sidumisi IP-dele;
• Lisatud on direktiiv nbthread, mis võimaldab seadistada HAProxy-s kasutatavate lõime arvu mitme tuuma CPU optimeerimiseks. Vaikimisi valitakse töölõngade arv vastavalt hetkel saadaval olevatele CPU tuumadele, samas kui pilvesituatsioonides määratakse vaikimisi üks lõng. Rangete piiride seadmiseks on lisatud kompileerimisvalikud MAX_THREADS ja MAX_PROCS, mis piiravad ülemise piiri lõimede ja protsesside arvule;
• Lihtsustatud on bind direktiivi kasutamine töötlejate sidumiseks võrguaadressidele. Seadistamisel pole nüüd enam vajalik protsessi parameetrite määramine — vaikimisi jagatakse ühendused lõimede vahel vastavalt aktiivsete ühenduste arvule.
• Logide seadistamine eraldatud konteinerites on lihtsustatud — logi saab nüüd suunata stdout ja stderr ning igasse olemasolevasse failidesse (näiteks "log fd@1 local0");
• Vaikimisi on lubatud HTX (Native HTTP Representation) tugi, mis võimaldab saavutada tasakaalu, rakendades täiustatud funktsioone nagu end-to-end HTTP/2, Layer 7 Retry'd ja gRPC. HTX ei asenda päiseid kohapeal, vaid viib muudatused ellu, eemaldades ja lisades uue päise nimekirja lõppu, võimaldades manipuleerida kõigi HTTP protokolli laiendatud variantidega, säilitades päiste algse semantika ja tõhustades jõudlust HTTP/2 ülekandel HTTP/1.1-le ja vastupidi;
• Rohkem ametlikku tuge end-to-end HTTP/2 režiimile (käsitleb kõiki etappe HTTP/2-s, sealhulgas tagaplaanile pöördumisi, mitte ainult kliendiga suhtlemist);
• Rakendatud on täielik kahe suuna gRPC protokolli pööramisvõime, võimaldades gRPC voogude analüüsimist, eraldi sõnumite esitlemist, gRPC liikluse logisse kajastamist ja sõnumite filtreerimist ACL-i abil. gRPC võimaldab korraldada mikroteenuste tööd erinevates programmeerimiskeeltes, mis suhtlevad omavahel universaalse API kaudu. gRPC võrgusuhtlus teostatakse HTTP/2 protokolli kohal ja põhineb andmete serialiseerimisel Protocol Buffers'i abil.
• Lisatud on "Layer 7 Retry'd" režiimi tugi, mis võimaldab saata korduvaid HTTP päringuid tarkvaravigade korral, mis ei ole seotud võrguühenduse loomise probleemidega (näiteks, kui puudub vastus või POST päringule on tühi vastus). Režiimi keelamiseks on "http-request" valikusse lisatud lipp "disable-l7-retry", ning täiendava seadistuse jaoks on sektsioonides defaults, listen ja backend saadaval valik "retry-on". Järgmised tingimused on saadaval korduvate saatmiste jaoks: all-retryable-errors, none, conn-failure, empty-response, junk-response, response-timeout, 0rtt-rejected, samuti seotud tagastatavate olekukoodidega (404 jne);
• Rakendatud on uus protsessihaldur (Process Manager), mis võimaldab konfigureerida väliste täidetavate failide helistamist töötlemise jaoks HAProxy jaoks.
  Näiteks sellise välise töötlejana on rakendatud API Data Plan (/usr/sbin/dataplaneapi) ning erinevaid Offload-voogude töötlemise mootorite.
• .NET Core, Go, Lua ja Pythonile on lisatud sidemed SPOE (Stream Processing Offload Engine) ja SPOP (Stream Processing Offload Protocol) laienduste arendamiseks. Varem oli toetatud laienduste arendamine ainult C keeles;
• Lisatud väline töötleja spoa-mirror (\/usr\/sbin\/spoa-mirror), et peegeldada päringuid eraldi serverisse (näiteks tööalase liikluse osade kopeerimiseks eksperimentaalse keskkonna testimise jaoks tegeliku koormuse all);
• Esitletud HAProxy Kubernetes Ingress Controller Kuna võimaldab integreerimist Kubernetes platvormiga;
• Lisatud sisseehitatud tugi statistika eksportimiseks monitooringusüsteemi Prometheus;
• Täpsem Peers Protocoli protokoll, mida kasutatakse teabe vahetamiseks teiste HAProxy sõlmede vahel. Sealhulgas on lisatud tugi Heartbeat'ile ja andmete krüpteerimisele;
• Log direktiivile on lisatud parameeter 'sample', mis lubab logida ainult osa päringutest, näiteks 1 kümnest, analüütilise valimi ettevalmistamiseks;
• Lisatud automaatse profileerimise režiim (direktiiv profiling.tasks, mis võib võtta väärtusi auto, on ja off). Automaatne profileerimine aktiveeritakse, kui keskmine latentsus ületab 1000 ms piiri. Profileerimistulemuste vaatamiseks on lisatud 'show profiling' käsk Runtime API-sse või on võimalus logisse statistika nullida;
• Lisatud tugi taustserveritele pöördumiseks SOCKS4 protokolli abil;
• Lisatud lõpp-punktide (end-to-end) tugi TCP kiirkontakti mehhanismi (TFO — TCP Fast Open, RFC 7413), mis võimaldab vähendada ühenduse loomise samme, kombineerides esimesed ja teised sammud klassikalisest 3-sammulisest ühenduse kokkuleppe protsessist ühte päringusse ning võimaldab andmete saatmist ühenduse loomise algfaasis;
• Lisatud uusi toiminguid:
  • «http-request replace-uri» URL asendamiseks regulaars väljendi abil;
  • «tcp-request content do-resolve» ja «http-request do-resolve» hostinime lahendamiseks;
  • «tcp-request content set-dst» ja «tcp-request content set-dst-port» siht-IP-aadresse ja pordi seadmiseks.
• Lisatud uusi teisendamooduleid:
  • aes_gcm_dev voogude dekrüpteerimiseks kasutades AES128-GCM, AES192-GCM ja AES256-GCM algoritme;
  • protobuf, et välja võtta väljad Protocol Buffers sõnumitest;
  • ungrpc, et välja võtta väljad gRPC sõnumitest.

  Allikas: opennet.ru