🥇E le na o le New Relic: se vaʻai i Datadog ma Atatus

I totonu o le siosiomaga o SRE / DevOps inisinia, o le a le faateia ai se tasi e i ai se aso e sau ai se tagata o tausia (poʻo se faiga mataʻituina) ma lipotia mai "ua leiloa mea uma": e le aoga le saite, e le alu totogi, ua pala le olaga. ... E tusa lava po o le a le tele o lou manaʻo e fesoasoani i se tulaga faapena, e mafai ona faigata tele ona fai lenei mea e aunoa ma se meafaigaluega faigofie ma malamalama. E masani lava o le faʻafitauli o loʻo natia i totonu o le tusi talosaga lava ia; e tatau lava ona e faʻaogaina.

Ma i le faanoanoa ma le olioli…

O le mea na tupu ua leva ma loloto lo matou alofa i le New Relic. Sa avea ma tumau pea o se meafaigaluega sili ona lelei mo le mataʻituina o le faʻatinoga o talosaga, ma faʻatagaina foi oe e tuʻufaʻatasia le fausaga o le microservice (faʻaaogaina lona sui) ma sili atu, sili atu. Ma e mafai ona lelei mea uma pe ana leai ni suiga i le faiga o tau o le tautua: o tau o mai le 2013 tausaga tupu 3+ taimi. E le gata i lea, talu mai le tausaga talu ai, o le mauaina o se tala faʻataʻitaʻiga e manaʻomia ai fesoʻotaʻiga ma se pule patino, lea e faigata ai ona tuʻuina atu le oloa i se tagata faʻatau.

Le tulaga masani: New Relic e le manaʻomia i luga o se "faavae tumau"; latou te manatua naʻo le taimi e amata ai faʻafitauli. Ae e mana'omia lava ona e totogi e le aunoa (140 USD i le server i le masina), ma i se fa'a otometi le fa'atupuina o le ao e fa'aopoopo le aofa'i tele. E ui lava o loʻo i ai se Pay-As-You-Go filifiliga, e mafai ai e le New Relic ona manaʻomia oe e toe amata le talosaga, lea e ono mafua ai le leiloa o le faʻafitauli faʻafitauli lea na amata uma ai. E leʻi leva talu ai, na faʻaalia ai e New Relic se fuafuaga fou o tau - taua, - lea i le tepa muamua e foliga mai o se suiga talafeagai i le Tomai Faapitoa... ae i le suʻesuʻeina totoʻa na iloa ai o loʻo misi nisi o galuega taua (aemaise lava, e leai se Fefaatauaiga Autu, Su'ega Talosaga Kolosi, Tufatufaina Su'ega).

O le iʻuga, na amata ona matou mafaufau e suʻe se isi mea taugofie, ma o la matou filifiliga na pa'ū i luga o auaunaga e lua: Datadog ma Atatus. Aisea ia i latou?

E uiga i tagata tauva

Sei ou fai atu i le taimi lava lena o loʻo i ai isi fofo ile maketi. Na matou mafaufau foi i filifiliga Open Source, ae le o tagata uma e maua le avanoa saoloto e faʻafeiloaʻi ai fofo e faʻafeiloaʻi e le tagata lava ia... - e le gata i lea, latou te manaʻomia le tausiga faaopoopo. O le ulugalii na ma filifilia na iʻu ina sili ona vavalalata i ai o tatou manaoga:

fausia-i totonu ma atiina ae le lagolago mo PHP talosaga (o matou tagata faʻapipiʻi e matua eseese, ae o se taʻitaʻi manino lea i le tulaga o le suʻeina o se isi mea i le New Relic);
tau taugofie (itiiti ifo i le 100 USD i le masina i le talimalo);
meafaifaaili otometi;
fa'atasi ma Kubernetes;
O le tutusa ma le New Relic interface o se faʻaopoopoga faʻaopoopo (ona o matou inisinia e masani i ai).

O le mea lea, i le laasaga muamua o le filifiliga, matou te faʻaumatia le tele o isi fofo lauiloa, aemaise lava:

Tideways, AppDynamics ma Dynatrace - mo tau;
Stackify ua poloka i le Russian Federation ma faʻaalia le tele o faʻamatalaga.

O le vaega o totoe o le tusiga o loʻo faʻatulagaina i se auala e faʻapuupuu muamua ai fofo o loʻo fesiligia, a maeʻa ona ou talanoa e uiga i la matou fegalegaleaiga masani ma New Relic ma le poto masani / faʻaalia mai le faia o gaioiga tutusa i isi auaunaga.

Tuuina atu o tagata tauva filifilia

i Lagolago fou, masalo ua faalogo tagata uma? O lenei auaunaga na amata lona atinaʻe i le silia ma le 10 tausaga talu ai, i le 2008. Sa matou faʻaaogaina malosi talu mai le 2012 ma e leai ni faʻafitauli i le tuʻufaʻatasia o se numera tele o talosaga i PHP, Ruby ma Python, ma ua matou maua foi le poto masani faʻatasi ma C # ma Go. O tusitala o le 'auʻaunaga o loʻo i ai fofo mo le mataʻituina o talosaga, atinaʻe, suʻesuʻeina microservice infrastructures, faia faʻaoga talafeagai mo masini faʻaoga, ma sili atu.

Ae ui i lea, o le New Relic sui e faʻatautaia i luga o tulafono faʻapitoa ma e le lagolagoina OpenTracing. O meafaifaaili maualuluga e mana'omia ni suiga fa'apitoa mo New Relic. Mulimuli ane, o le lagolago a Kubernetes o loʻo faʻataʻitaʻi pea.

Na amata lona atinaʻe i le 2010 Faʻamaumauga e foliga mai e sili atu le manaia nai lo le New Relic i le tulaga o le faʻaogaina i Kubernetes siosiomaga. Aemaise lava, e lagolagoina le tuʻufaʻatasia ma NGINX Ingress, aoina o ogalaau, statsd ma OpenTracing protocols, lea e mafai ai e oe ona siaki se talosaga a le tagata mai le taimi e fesoʻotaʻi ai i le maeʻa, faʻapea foʻi ma le mauaina o ogalaau mo lenei talosaga (i luga o le itu i luga o le upega tafaʻilagi. ma luga ole tagata fa'atau).

I le faʻaaogaina o Datadog, matou te faʻafeiloaʻi o nisi taimi na fausia ai le microservice faʻafanua sese, ma nisi faʻaletonu faʻapitoa. Mo se faʻataʻitaʻiga, na faʻaseseina le ituaiga o auaunaga (faʻasese Django mo se tautua faʻapipiʻi) ma mafua ai le 500 mea sese i se PHP talosaga e faʻaaoga ai le faletusi lauiloa a Predis.

Atatus — o le meafaifaaili aupito itiiti; na tatalaina le auaunaga i le 2014. O lana tala o le maketi e manino lava le maualalo i le lisi o tauva, o faʻamatalaga e sili atu ona le masani ai. Ae ui i lea, o le meafaigaluega lava ia e talitutusa lava ma New Relic, e le gata i ona gafatia (APM, Mataʻituina o le Browser, ma isi), ae faʻapea foʻi i foliga vaaia.

O se fa'aletonu taua e na'o le lagolagoina o Node.js ma PHP. I le isi itu, o loʻo faʻatinoina e sili atu le lelei nai lo Datadog. E le pei o le mea mulimuli, e le manaʻomia e Atatus ni tusi talosaga e fai ai suiga pe faʻaopoopo faʻailoga faaopoopo i le code.

Auala matou te galulue ai ma New Relic

Sei o tatou vaʻai pe faʻafefea ona tatou faʻaaogaina le New Relic. Fa'apea e iai se fa'afitauli e mana'omia se fofo:

E faigofie ona iloa ile kalafi sosolo - Sei o tatou iloiloina. I New Relic, o fefaʻatauaiga i luga ole laiga e vave filifilia mo se 'upega tafaʻilagi, o vaega uma o loʻo faʻaalia i le kalafi faʻatinoga, o loʻo i ai mea sese-fuainumera, talosaga-fuainumera panels ... O le a le mea e sili ona taua o le tuusao mai nei paneta e mafai ona e gaoioi i le va o eseesega. vaega o le talosaga (mo se faʻataʻitaʻiga, kiliki i luga o MySQL o le a taʻitaʻia ai le vaega o faʻamaumauga).

Talu ai i le faʻataʻitaʻiga o loʻo iloiloina tatou te vaʻaia ai le faʻateleina o gaioiga PHP, kiliki i luga o lenei siata ma otometi alu i Gaoioiga:

O le lisi o fefaʻatauaiga, o loʻo faʻatonuina mai le MVC faʻataʻitaʻiga, ua uma ona faʻavasegaina Tele taimi e alu ai, lea e matua faigofie lava: matou te vaʻavaʻai i le mea e fai e le talosaga. O faʻataʻitaʻiga nei o fesili uumi e otometi lava ona aoina e New Relic. I le fesuia'i fa'avasega, e faigofie ona maua:

le pule sili ona utaina;
e sili ona talosagaina le pule;
le sili ona lemu o le pule.

E le gata i lea, e mafai ona e faʻalauteleina fefaʻatauaiga taʻitasi ma vaʻai pe o le a le mea na faia e le talosaga i le taimi na faʻataunuʻu ai le code:

Ma le mea mulimuli, o le tusi talosaga e teuina faʻataʻitaʻiga o faʻasologa o talosaga uumi (mea e sili atu nai lo le 2 sekone). O le laulau lenei mo se fefaʻatauaiga umi:

E mafai ona iloa e lua auala e alu ai le tele o le taimi, ma i le taimi lava e tasi na faʻataunuʻuina ai le talosaga, o loʻo faʻaalia foi lona URI ma le vaega. Ole tele o taimi e fesoasoani lea ile su'eina ole talosaga ile ogalaau. Ou te alu i Su'e fa'amatalaga, e mafai ona e vaʻai pe o fea e valaʻau mai ai nei metotia:

Ma i totonu Fa'amatalaga fa'amaumauga - iloilo fesili i faʻamaumauga na faʻatinoina aʻo faʻagasolo le talosaga:

Faʻaauupegaina i lenei malamalama, e mafai ona tatou iloiloina pe aisea ua faʻagesegese ai le talosaga ma galulue ma le tagata faʻapitoa e faia se fuafuaga e foia ai le faʻafitauli. O le mea moni, e le o taimi uma e maua ai e le New Relic se ata manino, ae e fesoasoani i le filifilia o le vete o suʻesuʻega:

umi PDO::Construct na taʻitaʻia i matou i galuega uiga ese a pgpoll;
le mautu i le aluga o taimi Memcache::Get fautua mai e le sa'o le fa'atulagaina o le masini masini;
o se taimi masalosalo faʻateleina mo le faʻatulagaina o faʻataʻitaʻiga na taʻitaʻia ai se matasele faʻapipiʻi e siaki ai le i ai o le 500 avatars i le mea e teu ai mea;
ma isi…

E tupu foʻi nai lo le faʻatinoina o le code, o se mea e fesoʻotaʻi ma le teuina o faʻamatalaga i fafo e tupu i luga o le laupepa autu - ma e le afaina pe o le a: Redis poʻo le PostgreSQL - o loʻo natia uma i le laupepa. utufaamatalaga faaeletonika.

E mafai ona e filifilia se fa'avae fa'apitoa mo su'esu'ega ma fa'avasega fa'amatalaga - e tutusa ma le faiga i Fefa'atauaiga. Ma e ala i le alu i le talosaga tab, e mafai ona e vaʻai pe faʻafia ona tupu lenei talosaga i totonu o taʻiala taʻitasi, ma faʻatusatusa foi pe faʻafia ona valaʻau. E manaia tele:

O lo'o iai fa'amatalaga tutusa i le tab Auaunaga i fafo, lea e natia talosaga i fafo HTTP auaunaga, e pei o le mauaina o mea e teu ai mea, auina atu mea tutupu i leoleo, poʻo mea faapena. O mea o loʻo i totonu o le laupepa e tutusa lelei ma Faʻamaumauga:

Fa'atauva: avanoa ma lagona

O le taimi nei o le mea e sili ona manaia o le faʻatusatusaina o gafatia o New Relic ma mea e ofoina mai e le au tauva. O le mea e leaga ai, sa le mafai ona matou faʻataʻitaʻiina meafaigaluega uma e tolu i luga o le tasi faʻasologa o le tasi talosaga o loʻo faʻaogaina i le gaosiga. Ae ui i lea, na matou taumafai e faʻatusatusa tulaga / faʻatulagaina e tutusa tutusa.

1. Datadog

Faʻafeiloaʻi mai e Datadog i matou i se laulau ma puipui o auaunaga:

E taumafai e talepe talosaga i vaega / microservices, o lea i le faʻataʻitaʻiga Django talosaga o le a tatou vaʻaia 2 fesoʻotaʻiga i PostgreSQL (defaultdb и postgres), faapea le Seleri, Redis. O le galue ma le Datadog e mana'omia ai le itiiti o lou malamalama i mataupu faavae o le MVC: e tatau ona e malamalama i le mea e masani ona sau ai talosaga a tagata. E masani ona fesoasoani lenei mea fa'afanua auaunaga:

I le auala, o loʻo i ai se mea tutusa i le New Relic:

... ma o la latou faafanua, i loʻu manatu, ua sili atu ona faigofie ma manino: e le o faʻaalia vaega o le tasi talosaga (lea o le a sili atu ona auiliiliina, e pei o le Datadog), ae naʻo auaunaga faʻapitoa poʻo microservices.

Sei o tatou toe foʻi i Datadog: mai le faʻafanua o le tautua e mafai ona tatou vaʻaia o talosaga a tagata e oʻo mai i Django. Sei o tatou o i le Django auaunaga ma mulimuli ane vaʻai mea na matou faʻamoemoeina:

Ae paga lea, e leai se kalafi iinei e le mafai Taimi fefa'ataua'iga i luga ole laiga, e tutusa ma mea tatou te vaʻaia i luga o le New Relic panel autu. Ae ui i lea, e mafai ona faʻatulagaina i le nofoaga o le faʻatulagaga % o Taimi fa'aalu. Ua lava le sui i ai Tulaga taimi ile talosaga ile Ituaiga... ma o lea ua tilotilo mai le kalafi masani ia i matou!

Aisea na filifilia ai e Datadog se siata ese o se mealilo ia i matou. O le isi mea faʻalavelave e le manatua e le faiga le filifiliga a le tagata faʻaoga (e le pei o tagata tauva e lua), ma o le mea lea na o le pau lava le fofo o le fatuina lea o panela masani.

Ae sa ou fiafia i le gafatia i Datadog e fesuiaʻi mai nei kalafi i metrics o servers e fesoʻotaʻi, faitau ogalaau ma iloilo le uta i luga o le upega tafaʻilagi (Gunicorn). O mea uma e toetoe lava tutusa ma le New Relic ... ma e oʻo lava i sina mea itiiti (logs)!

I lalo ifo o kalafi o fefaʻatauaiga e tutusa lelei ma New Relic:

I Datadog, o fefaʻatauaiga e taʻua punaoa. E mafai ona e fa'avasega fa'atonu e ala i le numera o talosaga, i le averesi o le taimi e tali atu ai, ma le maualuga o le taimi fa'aalu mo se vaitaimi filifilia.

E mafai ona e faʻalauteleina le punaoa ma vaʻai i mea uma ua uma ona matou matauina i le New Relic:

O loʻo i ai faʻamaumauga i luga o le punaoa, o se lisi lautele o telefoni i totonu, ma faʻataʻitaʻiga o talosaga e mafai ona faʻavasega e ala i le tali tali ... I le ala, o matou inisinia na matua fiafia lava i lenei faʻavasegaina.

Soʻo se faʻataʻitaʻiga punaoa i Datadog e mafai ona tatalaina ma suʻesuʻeina:

Talosagaina parakalafa, se aotelega siata o le taimi e faaalu i vaega taitasi, ma se siata afu e faaalia ai le faasologa o valaau o loo tuuina atu. E mafai fo'i ona e sui i se va'aiga la'au o le siata afu:

Ma o le mea e sili ona manaia o le vaʻavaʻai i le uta a le talimalo lea na faʻataunuʻuina ai le talosaga ma vaʻavaʻai i ogalaau talosaga.

Fa'atasiga lelei!

Atonu e te taumanatunatu po o fea o i ai laupepa utufaamatalaga faaeletonika и Auaunaga i fafo, e pei o le New Relic. E leai se mea iinei: talu ai e faʻaumatia e Datadog le talosaga i vaega, o le a iloiloina PostgreSQL se auaunaga ese, ma nai lo Auaunaga i fafo e aoga le su'eina aws.storage (o le a tutusa mo isi auaunaga uma i fafo e mafai ona maua e le talosaga).

O se fa'ata'ita'iga lea ma postgres:

O le mea moni o loʻo i ai mea uma matou te manaʻo ai:

E mafai ona e vaʻai poʻo fea "auʻaunaga" na sau mai ai le talosaga.

E le o se mea sese le faʻamanatu atu ia te oe o Datadog e tuʻufaʻatasia lelei ma NGINX Ingress ma faʻatagaina oe e faia le suʻega pito i luga mai le taimi e oʻo mai ai se talosaga i totonu o le fuifui, ma faʻatagaina oe e maua fua faʻatatau, aoina ogalaau ma metrics talimalo. .

O se faʻaopoopoga tele o Datadog o lona tau ua amata ona foliga mai le mataituina o aseta, APM, Log Management and Synthetics test, i.e. E mafai ona e filifilia lau fuafuaga i se auala fetuutuunai.

2.Atatus

Fai mai le au a Atatus o la latou auaunaga e "tutusa ma le New Relic, ae sili atu." Se'i tatou vaai pe o le mea moni lea.

E foliga tutusa le laulau autu, ae e leʻi mafai ona iloa le Redis ma le memcached na faʻaaogaina i le talosaga.

E filifilia e le APM fefaʻatauaiga uma e ala i le le mafai, e ui lava e masani lava naʻo fefaʻatauaiga i luga ole laiga e manaʻomia. E pei o Datadog, e leai se auala e faʻafeiloaʻi ai i le auaunaga manaʻomia mai le vaega autu. E le gata i lea, o fefaʻatauaiga e lisiina pe a maeʻa mea sese, lea e foliga mai e le talafeagai mo le APM.

I fefaʻatauaiga a Atatus, o mea uma e tutusa ma le New Relic. O le pito i lalo o le faʻamalosi mo taʻitasi taʻitasi e le o vaʻaia vave. E tatau ona e su'eina i le laulau fa'atonu, fa'avasega fa'atasi Tele Taimi Fa'aaoga:

O lo'o maua le lisi masani o fa'atonu i le fa'ailoga suʻe:

I nisi o auala, o lenei laulau e faʻamanatu ai Datadog ma ou te fiafia i ai nai lo le tutusa i New Relic.

E mafai ona e faʻalauteleina fefaʻatauaiga taʻitasi ma vaʻai pe o le a le mea na fai e le talosaga:

O le laulau e sili atu ona faʻamanatuina Datadog: o loʻo i ai le tele o talosaga, o se ata lautele o telefoni. O le laulau pito i luga o loʻo tuʻuina atu ai se faʻailoga sese HTTP Fa'aletonu ma fa'ata'ita'iga o fesili fa'agesegese Fa'asologa o Sauniga:

Afai e te alu i se fefaʻatauaiga, e mafai ona e vaʻai i se faʻataʻitaʻiga o se faʻasologa, e mafai ona e mauaina se lisi o talosaga i le database ma vaʻai i ulutala talosaga. O mea uma e tutusa ma New Relic:

I se tulaga lautele, na fiafia Atatus i faʻamatalaga auiliili - e aunoa ma le New Relic faʻapipiʻiina o telefoni i totonu o se poloka faamanatu:

Ae ui i lea, e leai se faamama e (pei o le New Relic) o le a vavaeeseina ai talosaga vave (<5ms). I le isi itu, sa ou fiafia i le faʻaalia o le tali mulimuli o fefaʻatauaiga (manuia poʻo se mea sese).

Vaega utufaamatalaga faaeletonika o le a fesoasoani ia te oe e suʻesuʻe talosaga i faʻamaumauga i fafo o loʻo faia e le talosaga. Sei ou faamanatu atu ia te oe o Atatus na maua na o PostgreSQL ma MySQL, e ui lava o Redis ma memcached o loʻo aofia ai foi i le poloketi.

O talosaga e fa'avasega e tusa ai ma ta'iala masani: tali fa'atele, averesi taimi tali, ma isi. Ou te manaʻo foʻi e taʻua le lisi o loʻo i ai fesili sili ona lemu - e matua faigofie lava. E le gata i lea, o faʻamatalaga i totonu o lenei laupepa mo PostgreSQL e fetaui lelei ma faʻamatalaga mai le faʻaopoopoga pg_stat_statements - taunuuga lelei!

Tab Talosaga mai fafo e tutusa lelei ma Databases.

sailiiliga

O mea faigaluega uma e lua na faʻaalia lelei i le matafaioi a le APM. So'o se tasi oi latou e mafai ona ofoina atu le la'ititi mana'omia. E mafai ona aoteleina faapuupuu a tatou lagona e faapea:

Faʻamaumauga

Pros:

fa'asologa o ta'aloga talafeagai (APM tau 31 USD i le talimalo);
galue lelei ma le Python;
Avanoa o le tuʻufaʻatasia ma OpenTracing
fa'atasi ma Kubernetes;
faʻatasi ma NGINX Ingress.

Cons:

na'o le APM na mafua ai ona le maua le talosaga ona o se mea sese (predis);
vaivai PHP auto-meafaigaluega;
o se vaega uiga ese le faauigaina o auaunaga ma o latou faamoemoega.

Atatus

Pros:

meafaifaaili PHP loloto;
fa'aoga fa'aoga tutusa ma le New Relic.

Cons:

e le galue i luga o faiga faʻaoga tuai (Ubuntu 12.05, CentOS 5);
vaivai le ta'avale;
lagolago mo na o gagana e lua (Node.js ma PHP);
Fa'aoga lemu.

Mafaufau i le tau o Atatus o le 69 USD i le masina i le server, matou te manaʻo e faʻaoga Datadog, lea e tuʻufaʻatasia lelei ma o matou manaʻoga (upega tafaʻilagi i K8s) ma e tele mea aoga.

SALA

Faitau foi i la matou blog:

puna: www.habr.com

E le naʻo le New Relic: se vaʻaiga i Datadog ma Atatus