Cloudflare on üle läinud NGINX-ilt enda Pingora proksile, mis on kirjutatud Rusti keeles

Cloudflare teatas, et on liikunud oma sisu edastamise võrgu kasutusele Pingora proksi peale, mis on kirjutatud Rust keeles. Uus proksi asendas NGINX serveri ja Lua skriptide põhise konfiguratsiooni ning töötleb üle ühe triljoni päringu päevas. Tõdetakse, et üleminek spetsialiseeritud proksile on võimaldanud mitte ainult uusi võimalusi rakendada ja suurendada turvalisust tänu mäluga turvalisele töötlemisele, vaid see on toonud kaasa ka märkimisväärse tõusu jõudluses ja ressursi säästus – Pingora põhine lahendus ei vaja Lua kasutamist, seetõttu tarbib see sama liikluse töötlemisel CPU-d 70% ja mälu 67% võrra vähem.

Pikka aega rahuldas liikluse proksitamise süsteem, mis töötas kasutajate ja lõppsihtkohtade vahel, serveritega NGINX ja Lua skriptide põhjal Cloudflare'i vajadusi, kuid võrgustiku kasvamise ja selle keerukuse suurenemisega osutus universaalne lahendus ebapiisav nii jõudluse kui ka laiendatavuse ja uute klientide võimaluste täitmise seisukohalt. Eristi tõusid probleemid funktsionaalsuse lisamisel, mis ületas lihtsa värava ja koormuse tasakaalu lahenduse. Näiteks tekkis vajadus taaskäivitada päring teisele serverile, serverilt varustades seda erineva HTTP-pealkirjade kogumiga.

Pingoras on rakendatud mitme lõime mudel, mis eristab seda protsesside (töötlejad) baasil olevast arhitektuurist, ning on näidanud Cloudflare'i kasutusstsenaariumites (kõrge liikluse kontsentratsioon erinevatelt saitidelt suure statistilise nihkega) tõhusamat ressursside jaotust CPU tuumade vahel. Eriti paljude tasakaalustamata päringute seondamine NGINX protsessidesse viis tasakaalustamata koormuseni CPU tuumadel, mistõttu ressursimahukad päringud ja blokeeriv sisend-väljund aeglustasid teiste päringute töötlemist. Lisaks ei võimaldanud ühenduste rühmade seondamine töötlusprotsessidega olemasolevaid ühendusi uuesti kasutada, mis vähendas töö efektiivsust, kui töötlejaid oli palju.

NGINX:

Pingora:

Pingora rakendamine on võimaldanud vähendada uute ühenduste loomise operatsioonide arvu 160 korda ja suurendada taaskasutatavate päringute osakaalu 87,1% -lt 99,92% -ni. Lisaks korduvate ühenduste vähenemisele ja CPU tuumade tõhusama kasutamisele aitas uue proksi jõudluse tõusule märgatavalt kaasa ka nginx'iga kasutatavate aeglaste Lua keele töötlejate mahajätmine.

Rust keel on valitud tänu sellele, et see võimaldab saavutada kõrget jõudlust koos mälu turvalise käitlemise vahenditega. Mainitakse, et vaatamata Cloudflare'i inseneride kõrgele kvalifikatsioonile ja C keeles kirjutatud koodi ülevaatusele ei ole suudetud vältida vigu, mis põhjustavad mälu probleeme (näiteks HTML parsi vulneraablus). Uue koodi osas räägitakse Pingora tõrgete analüüsist, mis osutus mitte rakenduse probleemiks, vaid Linuxi tuuma ja riistvarade tõrgete vigadeks.

Lisaks on märkimisväärne Linus Torvalds'i kommentaar, mis kõlas praegu toimuval Open-Source Summit Europe konverentsil, seoses Rust keele toe lisamisega Linuxi tuumasse. 6.0 tuuma patšid, mis käsitlevad seadme draiverite arendamist Rust'is, ei ole veel lisatud, kuid Linuse sõnul võetakse need tõenäoliselt vastu 6.1 tuumas, ta ei plaani integratsiooniga viivitada. Rust'i toe lisamise motivatsiooni, peale positiivse mõju turvalisusele, nimetab Linus ka võimaluseks tõsta uute osalejate huvi tuuma arendamise vastu, mis on aktuaalne vanadele meistritele aeglaselt vananedes.

Allikas: opennet.ru