Tha Yandex air Perforator fhosgladh, inneal airson cunntas a thoirt air tagraidhean

Dh’ainmich Yandex gun deach am pasgan innealan Perforator aca fhoillseachadh le stòr fosgailte, a chaidh a dhealbhadh airson cruinneachadh leantainneach de mheatrachdan mionaideach le fiosrachadh mu choileanadh thagraidhean agus air a dhealbhadh airson a chleachdadh ann an cruinneachaidhean mòra agus ionadan dàta. Leigidh am pasgan innealan le mion-sgrùdadh fìor-ùine air coileanadh thagraidhean, riarachadh ghoireasan, agus Linux-frithealaichean agus comharraich na h-aplacaidean as dian air goireasan. Tha an còd sgrìobhte ann an C++ agus air a sgaoileadh fo chead MIT (tha prògraman eBPF fo chead GPLv2).

Tha Yandex Perforator air a chleachdadh ann an cruinneachadh de chòrr is 10 nod agus thathar ga chleachdadh gus cùisean coileanaidh a chomharrachadh agus a chàradh thar diofar sheirbheisean, nam measg Yandex Search agus Yandex Advertising. Thathas air creideas a thoirt do Perforator airson bacadh a chur air cnapan-starra agus coimpiutaireachd dian-ghoireasan a bharrachadh, a’ leigeil le Yandex na cosgaisean aige a lughdachadh 20%. frithealaichean.

Comasan tagraidh:

• A’ cleachdadh fo-shiostam eithne eBPF agus an perf_events API gus fiosrachadh a chruinneachadh mu obrachadh phàirtean eithne Linux agus aplacaidean àite-cleachdaidh. Tha cosgais co-cheangailte ri cruinneachadh mheatrach ag adhbhrachadh peanas coileanaidh de mu 0.1%. Ri fhaighinn air siostaman ailtireachd x86-64 a-mhàin.
• Stòradh pròifil coileanaidh scalable. Tha an ClickHouse DBMS air a chleachdadh gus meata-dàta pròifil a stòradh, tha PostgreSQL air a chleachdadh gus meata-dàta dà-chànanach a stòradh, agus tha stòradh sam bith a tha co-chosmhail ri Amazon S3 air a chleachdadh gus pròifilean amh agus dàta binary a stòradh.
• Comas an stac gairm a leigeil a-mach gun a bhith agad ri samhlaidhean deasbaid a chomasachadh agus an roghainn -fno-omit-frame-pointer nuair a bhios tu a’ togail phrògraman (a ’sàbhaladh puing don fhrèam stac anns a bheil na seòlaidhean tilleadh agus caochladairean gnìomh).
• Cànan ceist agus eadar-aghaidh lìn ri fhaighinn airson luchd CPU a sgrùdadh nuair a bhios iad a’ ruith thagraidhean.
• Thathas a’ cleachdadh fradharc stoidhle FlameGraph gus botail a mheasadh gu fradharcach.
• Comas air pròiseactan a phròifil a’ cleachdadh diofar chànanan agus amannan ruith gun a bhith ag atharrachadh pròiseasan togail no ag ath-chruinneachadh phrògraman. Tha taic airson na cànanan prògramaidh C ++, Go, Rust, Java, Python agus JavaScript/Node.js air an ainmeachadh.
• An comas pròifilean sPGO a ghineadh airson co-chruinneachadh thagraidhean às deidh sin le optimizations stèidhichte air toraidhean pròifil còd (PGO - optimization treòraichte le pròifil), a leigeas le còd nas fheàrr a ghineadh stèidhichte air mion-sgrùdadh air feartan coileanadh prògram.
• Taic airson a chleachdadh mar àite an inneal-taic perf ann an Linux.
• Cuir fèin-ghluasad air cleachdadh ann an cruinneachaidhean stèidhichte air Kubernetes. Bidh gach nód a’ ruith àidseant sònraichte a bhios a’ tional, a’ cruinneachadh, a’ teannachadh, agus a’ sgaoileadh dàta coileanaidh. Tha dàta air a ghluasad le riochdairean ann an cruth a tha co-chosmhail ri pprof tro gRPC gu meanbh-sheirbheisean le uallach airson a bhith a’ tional, a’ stòradh, a’ mion-sgrùdadh, a’ samhlachadh (sheòlaidhean a thionndadh gu ainmean gnìomh agus dreuchdan ann an còd) agus a’ giullachd phròifilean agus so-ghnìomhan (riatanach airson stac a leigeil ma sgaoil).

Source: fosgailtenet.ru