🥇Tsy Relika Vaovao irery: jereo ny Datadog sy Atatus

Ao amin'ny tontolon'ny injeniera SRE/DevOps, tsy hahagaga na iza na iza fa indray andro any dia misy mpanjifa (na rafitra fanaraha-maso) miseho ary mitatitra fa "very ny zava-drehetra": tsy mandeha ny tranokala, tsy mandeha ny fandoavam-bola, miharatsy ny fiainana. ... Na manao ahoana na manao ahoana ny fanirianao hanampy amin'ny toe-javatra toy izany, dia mety ho sarotra be ny manao izany raha tsy misy fitaovana tsotra sy azo takarina. Matetika ny olana dia miafina ao amin'ny kaody fampiharana; mila mametraka azy io fotsiny ianao.

Ary amin'ny alahelo sy ny fifaliana…

Nitranga izany fa efa ela no raiki-pitia tamin'ny New Relic izahay. Izy io dia ary mijanona ho fitaovana tsara indrindra amin'ny fanaraha-maso ny fahombiazan'ny fampiharana, ary ahafahanao mampiasa ny maritrano microservice (mampiasa ny masony) sy ny maro hafa. Ary mety ho tsara ny zava-drehetra raha tsy noho ny fiovan'ny politikan'ny vidin'ny serivisy: izany vidin'ny avy amin'ny taona 2013 nitombo in-3+. Ankoatra izany, nanomboka tamin'ny taon-dasa, ny fahazoana kaonty fitsapana dia mitaky fifandraisana amin'ny mpitantana manokana, izay manasarotra ny fanolorana ny vokatra amin'ny mpanjifa mety.

Ny toe-javatra mahazatra: Ny Relic vaovao dia tsy ilaina amin'ny "fototra maharitra"; amin'ny fotoana hanombohan'ny olana ihany no tadidiny. Saingy mbola mila mandoa tsy tapaka ianao (140 USD isaky ny mpizara isam-bolana), ary amin'ny fotodrafitrasa rahona mandeha ho azy dia mitombo be ny vola. Na dia misy safidy Pay-As-You-Go aza, ny fampandehanana ny New Relic dia mitaky anao hamerina ny fampiharana, izay mety hitarika amin'ny fahaverezan'ny toe-javatra misy olana izay nanombohana azy rehetra. Vao tsy ela akory izay, ny New Relic dia nampiditra drafi-karama vaovao - Essentials, - izay raha vao jerena dia toa safidy azo ekena ho an'ny Professional... saingy rehefa nodinihina akaiky dia hita fa misy asa lehibe tsy hita (indrindra fa tsy manana Transactions Key, Cross Application Tracing, Distributed Tracing).

Vokatr'izany dia nanomboka nieritreritra ny hitady safidy mora kokoa izahay, ary ny safidinay dia nilatsaka tamin'ny serivisy roa: Datadog sy Atatus. Nahoana amin'izy ireo?

Momba ny mpifaninana

Avelao aho hilaza avy hatrany fa misy vahaolana hafa eny an-tsena. Nodinihinay mihitsy aza ny safidy Open Source, saingy tsy ny mpanjifa rehetra no manana fahafahana malalaka hampiantrano vahaolana ampiantranoan-tena... - ankoatra izany, dia mitaky fikojakojana fanampiny izy ireo. Ilay mpivady nofidianay no tena akaiky indrindra ny filantsika:

fanohanana naorina sy novolavolaina ho an'ny rindranasa PHP (tena isan-karazany ny stack an'ny mpanjifantsika, saingy mpitarika mazava izany eo amin'ny sehatry ny fitadiavana safidy ho an'ny New Relic);
vidiny mora (latsaky ny 100 USD isam-bolana isaky ny mpampiantrano);
fitaovana mandeha ho azy;
fampidirana amin'ny Kubernetes;
Ny fitoviana amin'ny interface New Relic dia miampy iray (satria efa zatra ny injenieranay).

Noho izany, tamin'ny dingana fifantenana voalohany dia nesorinay ny vahaolana malaza maro hafa, ary indrindra indrindra:

Tideways, AppDynamics ary Dynatrace - ho an'ny vidiny;
Voasakana ny Stackify ao amin'ny Federasiona Rosiana ary mampiseho angona kely loatra.

Ny ambiny amin'ny lahatsoratra dia voarafitra amin'ny fomba izay haseho fohifohy aloha ny vahaolana resahina, ary avy eo dia hiresaka momba ny fifaneraserantsika mahazatra amin'ny New Relic sy ny traikefa / fanehoan-kevitra amin'ny fanatanterahana asa mitovy amin'izany amin'ny serivisy hafa aho.

Fanolorana ireo mpifaninana voafantina

amin'ny New Relic, efa naheno daholo angamba? Ity serivisy ity dia nanomboka ny fivoarany 10 taona mahery lasa izay, tamin'ny taona 2008. Nazoto nampiasa azy io izahay nanomboka tamin'ny taona 2012 ary tsy nanana olana tamin'ny fampidirana rindranasa maro be amin'ny PHP, Ruby ary Python, ary nanana traikefa tamin'ny fampidirana C# sy Go ihany koa izahay. Ny mpanoratra ny serivisy dia manana vahaolana amin'ny fanaraha-maso ny rindranasa, ny fotodrafitrasa, ny fanaraha-maso ny fotodrafitrasa microservice, ny famoronana fampiharana mety ho an'ny fitaovana mpampiasa, sy ny maro hafa.

Na izany aza, ny mpiasan'ny New Relic dia mandeha amin'ny protocols proprietary ary tsy manohana ny OpenTracing. Ny fitaovana mandroso dia mitaky fanitsiana manokana ho an'ny New Relic. Farany, mbola andrana ny fanohanana Kubernetes.

Nanomboka ny fampandrosoana tamin'ny 2010 datadog toa mahaliana kokoa noho ny New Relic raha ny marina amin'ny lafiny fampiasana amin'ny tontolo Kubernetes. Indrindra indrindra, manohana ny fampidirana amin'ny NGINX Ingress, fanangonana log, statsd ary OpenTracing protocols, izay ahafahanao manara-maso ny fangatahan'ny mpampiasa manomboka amin'ny fotoana mifandray amin'ny fahavitan'izany, ary koa mahita logs ho an'ity fangatahana ity (samy eo amin'ny lafiny mpizara tranonkala. ary amin'ny mpanjifa).

Rehefa mampiasa Datadog, dia nifanena izahay fa indraindray dia diso ny fanamboarana ny sari-tany microservice, ary misy lesoka ara-teknika sasany. Ohatra, diso ny fahafantarana ny karazana serivisy (diso ny Django ho serivisy caching) ary niteraka hadisoana 500 tamin'ny fampiharana PHP tamin'ny fampiasana ny tranomboky Predis malaza.

Atatus - ny zandriny indrindra zavamaneno; natomboka tamin'ny taona 2014 ny serivisy. Ny teti-bola ara-barotra dia mazava ho azy fa ambany noho ireo mpifaninana voatanisa, tsy dia mahazatra loatra ny filazana. Na izany aza, ny fitaovana dia tena mitovy amin'ny New Relic, tsy amin'ny fahaizany (APM, Browser fanaraha-maso, sns), fa koa amin'ny endriny.

Ny tsy fahampiana lehibe dia ny Node.js sy PHP ihany no manohana azy. Amin'ny lafiny iray, ny fampiharana azy dia tsara kokoa noho ny Datadog. Tsy sahala amin'ity farany, Atatus dia tsy mitaky fampiharana hanovana na hampidirana marika fanampiny amin'ny kaody.

Ahoana no iarahantsika miaraka amin'ny New Relic

Andeha hojerentsika ny fomba ampiasana ny New Relic amin'ny ankapobeny. Andeha atao hoe manana olana mila vahaolana isika:

Mora jerena amin'ny grafika nidaboka - Andeha hodinihintsika izany. Ao amin'ny New Relic, ny fifampiraharahana amin'ny Internet dia voafantina avy hatrany ho an'ny fampiharana amin'ny Internet, ny singa rehetra dia aseho amin'ny grafika fampisehoana, misy ny taham-pahadisoana, ny taham-piangaviana ... Ny tena zava-dehibe dia ny hoe mivantana avy amin'ireo tontonana ireo dia azonao atao ny mivezivezy amin'ny sehatra samihafa. ampahany amin'ny rindranasa (ohatra, ny fipihana ny MySQL dia hitondra any amin'ny fizarana angon-drakitra).

Satria ao amin'ny ohatra hodinihintsika dia mahita firongatry ny asa isika PHP, tsindrio ity tabilao ity ary mandehana ho azy varotra:

Ny lisitry ny fifampiraharahana, izay tena mpanara-maso avy amin'ny maodely MVC, dia efa voalahatra Mandany fotoana be indrindra, izay tena mety: hitantsika avy hatrany izay ataon'ny fampiharana. Ireto misy ohatra amin'ny fanontaniana lava izay angonin'ny New Relic ho azy. Amin'ny alàlan'ny famadihana fanasokajiana dia mora hita izany:

ny fanaraha-maso fampiharana be indrindra;
controller matetika angatahina;
ny miadana indrindra amin'ny mpanara-maso.

Ho fanampin'izay, azonao atao ny manitatra ny fifampiraharahana tsirairay ary mijery izay nataon'ilay fampiharana tamin'ny fotoana nanaovana ny code:

Farany, ny fampiharana dia mitahiry ohatra momba ny fangatahana lava (ireo izay maharitra 2 segondra mahery). Ity ny tontonana ho an'ny fifampiraharahana maharitra:

Hita fa mila fotoana be ny fomba roa, ary amin'ny fotoana nanaovana ny fangatahana dia aseho ihany koa ny URI sy ny sehatra. Matetika izany dia manampy amin'ny fitadiavana ny fangatahana ao amin'ny logs. Mandeha any Tsipirian'ny trace, azonao jerena hoe avy aiza no iantsoana ireto fomba ireto:

Ary ao Fanontaniana momba ny angona - manombatombana fanontaniana amin'ny angon-drakitra izay notanterahina nandritra ny fampiharana:

Miaraka amin'izany fahalalana izany, afaka manombana ny antony mahatonga ny fampiharana miadana isika ary miara-miasa amin'ny mpamorona mba hamorona paikady hamahana ny olana. Raha ny tena izy, ny New Relic dia tsy manome sary mazava foana, fa manampy amin'ny fisafidianana ny vector amin'ny fanadihadiana:

ela PDO::Construct nitarika antsika ho amin'ny fiasan'ny pgpoll hafahafa;
tsy fandriam-pahalemana rehefa mandeha ny fotoana Memcache::Get nanolo-kevitra fa diso ny fanamboarana ny milina virtoaly;
ny fotoana mampiahiahy nitombo ho an'ny fanodinana môdely dia nitarika ho amin'ny tadivavarana nanamarina ny fisian'ny avatar 500 ao amin'ny fitahirizana zavatra;
sy ny sisa…

Mitranga ihany koa fa raha tokony hampihatra kaody, dia misy zavatra mifandraika amin'ny fitahirizana angon-drakitra ivelany mitombo eo amin'ny efijery lehibe - ary tsy maninona izay ho izy: Redis na PostgreSQL - miafina ao anaty tabilao izy ireo. angona.

Azonao atao ny misafidy fototra manokana ho an'ny fikarohana sy fanasokajiana fanontaniana - mitovy amin'ny fomba fanaovana izany ao amin'ny Transactions. Ary amin'ny alàlan'ny fandehanana any amin'ny tabilao fangatahana dia azonao atao ny mahita hoe impiry izany fangatahana izany no mitranga amin'ny tsirairay amin'ireo mpanara-maso ny fampiharana, ary manombana ihany koa hoe impiry no iantsoana azy. Tena mahazo aina:

Ny tabilao dia misy angona mitovy Serivisy ivelany, izay manafina ny fangatahana amin'ny serivisy HTTP ivelany, toy ny fidirana amin'ny fitahirizana zavatra, fandefasana hetsika any amin'ny mpiambina, na ny toy izany. Ny votoatin'ny tabilao dia mitovy tanteraka amin'ny Databases:

Mifaninana: fahafahana sy fahatsapana

Ankehitriny ny zavatra mahaliana indrindra dia ny mampitaha ny fahaizan'ny New Relic amin'ny zavatra atolotry ny mpifaninana. Indrisy anefa fa tsy afaka nanandrana ireo fitaovana telo izahay tamin'ny dikan-teny iray amin'ny fampiharana iray mandeha amin'ny famokarana. Na izany aza, niezaka ny nampitaha toe-javatra/fandrindrana izay mitovy araka izay azo atao.

1. Datadog

Datadog dia miarahaba antsika amin'ny tontonana misy rindrina serivisy:

Miezaka ny manapaka ny rindranasa ho singa / microservices, ka amin'ny ohatra Django fampiharana dia hahita fifandraisana 2 amin'ny PostgreSQL (defaultdb и postgres), ary koa Selery, Redis. Ny fiaraha-miasa amin'ny Datadog dia mitaky anao hanana fahalalana kely momba ny foto-kevitry ny MVC: mila mahatakatra ianao hoe avy aiza ny fangatahan'ny mpampiasa amin'ny ankapobeny. Manampy izany matetika sarintany serivisy:

Raha ny marina, misy zavatra mitovy amin'ny New Relic:

... ary ny sarintanin'izy ireo, raha ny hevitro, dia natao tsotra sy mazava kokoa: tsy mampiseho ireo singa amin'ny fampiharana iray (izay hahatonga azy ho feno antsipiriany, toy ny amin'ny Datadog), fa ny serivisy manokana na ny microservices.

Andao hiverina amin'ny Datadog: avy amin'ny sarintany serivisy dia hitantsika fa tonga any Django ny fangatahan'ny mpampiasa. Andao ho any amin'ny serivisy Django ary hojerentsika amin'ny farany izay nantenainay:

Indrisy anefa fa tsy misy kisary eto raha ny default Fotoana fifampiraharahana amin'ny Internet, mitovy amin'ny hitantsika eo amin'ny tontonana New Relic lehibe. Na izany aza, azo amboarina ho solon'ny fandaharam-potoana % ny fotoana lany. Ampy ny mamadika azy Fotoana salan'ny fangatahana araka ny karazana... ary izao ny grafika mahazatra dia mijery antsika!

Zava-miafina amintsika ny antony nisafidianan'i Datadog tabilao hafa. Ny zavatra mahasosotra iray hafa dia ny tsy mahatadidy ny safidin'ny mpampiasa ny rafitra (tsy toy ny mpifaninana roa), ary noho izany ny hany vahaolana dia ny famoronana tontonana manokana.

Saingy faly aho tamin'ny fahafahan'ny Datadog nifindra avy amin'ireo grafika ireo ho amin'ny metrikan'ireo mpizara mifandraika, mamaky ny logs ary manombatombana ny enta-mavesatry ny mpizara mpizara tranonkala (Gunicorn). Saika mitovy amin'ny ao amin'ny New Relic daholo ny zava-drehetra ... ary na dia kely kokoa aza (logs)!

Eo ambanin'ny grafika dia misy fifampiraharahana mitovy amin'ny New Relic:

Ao amin'ny Datadog dia antsoina ny fifampiraharahana harena. Azonao atao ny mandamina ny mpanara-maso amin'ny isan'ny fangatahana, amin'ny salan'isan'ny fotoana famaliana, ary amin'ny fotoana farany indrindra lany mandritra ny fe-potoana voafantina.

Azonao atao ny manitatra ny loharano ary mijery izay rehetra efa hitantsika tao amin'ny New Relic:

Misy antontan'isa momba ny loharanon-karena, lisitra ankapoben'ny antso anatiny, ary ohatra amin'ny fangatahana azo alamina amin'ny alàlan'ny kaody valiny... Raha ny marina, tena tian'ny injenieranay io fanasokajiana io.

Ny loharano ohatra rehetra ao amin'ny Datadog dia azo sokafana sy ianarana:

Mametraka masontsivana, tabilao famintinana ny fotoana lany amin'ny singa tsirairay, ary tabilao riandrano mampiseho ny filaharan'ny antso. Azonao atao koa ny mifindra amin'ny fijerena hazo amin'ny tabilao riandrano:

Ary ny tena mahaliana dia ny fijerena ny enta-mavesatry ny mpampiantrano izay nanaovana ny fangatahana ary ny fijerena ny diarin'ny fangatahana.

Fampidirana mahafinaritra!

Mety manontany tena ianao hoe aiza ny tabilao angona и Serivisy ivelany, toy ny ao amin'ny New Relic. Tsy misy eto: satria ny Datadog dia mamadika ny fampiharana ho singa, PostgreSQL no hodinihina serivisy mitokana, ary ho solon'ny Serivisy ivelany no mendrika tadiavina aws.storage (hitovitovy amin'ny serivisy ivelany hafa azon'ny fampiharana idirana izany).

Ity misy ohatra amin'ny postgres:

Amin'ny ankapobeny dia misy izay rehetra tadiavintsika:

Azonao jerena hoe "serivisy" avy aiza ilay fangatahana.

Tsy diso ny mampahatsiahy anao fa ny Datadog dia mitambatra tsara amin'ny NGINX Ingress ary mamela anao hanao fika farany hatramin'ny fotoana nahatongavan'ny fangatahana ao amin'ny cluster, ary ahafahanao mahazo metrika statsd, manangona logs ary metrika mpampiantrano. .

Ny tombony lehibe amin'ny Datadog dia ny vidiny miova endrika avy amin'ny fanaraha-maso ny fotodrafitrasa, ny APM, ny Fitantanana ny Log ary ny fitsapana Synthetics, izany hoe. Azonao atao ny misafidy ny drafitrao amin'ny fomba malefaka.

2. Atatus

Ny ekipan'ny Atatus dia nilaza fa ny serivisy dia "mitovy amin'ny New Relic, fa tsara kokoa." Andeha hojerentsika raha izany no izy.

Ny tontonana lehibe dia mitovy, saingy tsy azo atao ny mamaritra ny Redis sy memcached ampiasaina amin'ny fampiharana.

Ny APM dia misafidy ny fifampiraharahana rehetra amin'ny alàlan'ny default, na dia amin'ny ankapobeny aza dia ilaina ny fifampiraharahana amin'ny Internet. Tahaka ny Datadog, tsy misy fomba hivezivezena mankany amin'ny serivisy tadiavina avy amin'ny tontonana lehibe. Ambonin'izany, voatanisa aorian'ny hadisoana ny fifanakalozana, izay toa tsy mitombina loatra amin'ny APM.

Ao amin'ny fifanakalozana Atatus, ny zava-drehetra dia mitovy amin'ny New Relic. Ny lafy ratsiny dia tsy hita avy hatrany ny dinamika ho an'ny mpanara-maso tsirairay. Tsy maintsy mitady azy ao amin'ny latabatra fanaraha-maso ianao, manasaraka azy Fotoana lany indrindra:

Ny lisitry ny mpanara-maso mahazatra dia hita ao amin'ny tabilao Explore:

Amin'ny lafiny sasany, ity latabatra ity dia mampahatsiahy an'i Datadog ary tiako kokoa noho ilay mitovy amin'ny New Relic.

Azonao atao ny manitatra ny fifampiraharahana tsirairay ary jereo ny nataon'ilay fampiharana:

Ny tontonana koa dia mampahatsiahy kokoa an'i Datadog: misy fangatahana maromaro, sary ankapoben'ny antso. Ny tontonana ambony dia manome tabilao misy hadisoana HTTP tsy fahombiazana ary ohatra amin'ny fanontaniana miadana Session Traces:

Raha mandeha amin'ny fifampiraharahana ianao dia afaka mahita ohatra iray amin'ny trace, azonao atao ny mahazo lisitry ny fangatahana amin'ny angon-drakitra ary mijery ny lohatenin'ny fangatahana. Ny zava-drehetra dia mitovy amin'ny New Relic:

Amin'ny ankapobeny, faly i Atatus tamin'ny tsipika amin'ny antsipiriany - tsy misy ny fametahana antso an-tariby vaovao mahazatra ao anaty sakana fampahatsiahivana:

Na izany aza, tsy misy sivana izay (toa ny New Relic) dia hanapaka ny fangatahana faran'izay haingana (<5ms). Etsy ankilany, tiako ny fampisehoana ny valin-kafatra farany (fahombiazana na fahadisoana).

tontonana angona dia hanampy anao handalina ny fangatahana amin'ny angon-drakitra ivelany izay ataon'ny fampiharana. Mamelà ahy hampahatsiahy anao fa ny PostgreSQL sy MySQL ihany no hitan'i Atatus, na dia tafiditra ao anatin'ilay tetikasa aza ny Redis sy memcached.

Ny fangatahana dia sokajiana araka ny fepetra mahazatra: matetika mamaly, salan'isa fotoana mamaly, sy ny sisa. Tiako koa ny manonona ny tabilao misy fanontaniana miadana indrindra - tena mety. Ankoatr'izay, ny angon-drakitra ao amin'ity tabilao ity ho an'ny PostgreSQL dia nifanandrify tamin'ny angona avy amin'ny fanitarana pg_stat_statements - vokatra tsara!

kiheba Fangatahana ivelany mitovy tanteraka amin'ny Databases.

hitany

Samy nahavita tsara ny andraikitry ny APM ireo fitaovana natolotra ireo. Ny tsirairay amin'izy ireo dia afaka manolotra ny kely indrindra ilaina. Ny fahatsapantsika dia azo fintinina fohifohy toy izao manaraka izao:

datadog

matihanina:

fandaharam-potoana ara-dalàna mety (mitentina 31 USD isaky ny mpampiantrano ny APM);
niasa tsara tamin'ny Python;
Ny fahafahana miditra amin'ny OpenTracing
fampidirana amin'ny Kubernetes;
Fifandraisana amin'ny NGINX Ingress.

maharatsy ny mifampiresaka:

ny hany APM nahatonga ny fampiharana ho tsy azo noho ny fahadisoana Module (predis);
malemy PHP auto-fitaovana;
Famaritana hafahafa momba ny serivisy sy ny tanjon'izy ireo.

Atatus