🥇 Chan e New Relic a-mhàin: sùil air Datadog agus Atatus

Ann an àrainneachd innleadairean SRE / DevOps, cha chuir e iongnadh air duine sam bith gu bheil aon latha neach-dèiligidh (no siostam sgrùdaidh) a’ nochdadh agus ag aithris gu bheil “a h-uile càil air chall”: chan eil an làrach ag obair, chan eil pàighidhean a ’dol troimhe, tha beatha a’ crìonadh ... Ge bith dè an ìre a bhiodh tu airson cuideachadh ann an suidheachadh mar sin, faodaidh e a bhith gu math duilich seo a dhèanamh às aonais inneal sìmplidh agus so-thuigsinn. Gu math tric tha an duilgheadas falaichte ann an còd an tagraidh fhèin; chan fheum thu ach a h-ionadail.

Agus ann am bròn agus ann an toileachas ...

Tha e mar sin gu bheil sinn air tuiteam gu mòr ann an gaol le New Relic o chionn fhada. Bha e agus tha e fhathast na inneal sàr-mhath airson sùil a chumail air coileanadh tagraidh, agus leigidh e leat cuideachd an ailtireachd microservice ionnstramaid (a ’cleachdadh an neach-ionaid aige) agus mòran, mòran a bharrachd. Agus dh’ fhaodadh a h-uile dad a bhith air leth math mura b’ ann airson atharrachaidhean ann am poileasaidh prìsean na seirbheis: e cosgais bho bhliadhna 2013 air fàs 3+ tursan. A bharrachd air an sin, bhon uiridh, tha feum air conaltradh le manaidsear pearsanta gus cunntas deuchainn fhaighinn, a tha ga dhèanamh duilich an toradh a thaisbeanadh do neach-ceannach a dh’ fhaodadh a bhith ann.

An suidheachadh àbhaisteach: Chan eil feum air New Relic air “stèidh mhaireannach”; chan eil cuimhne aca air ach aig an àm a thòisicheas duilgheadasan. Ach feumaidh tu fhathast pàigheadh gu cunbhalach (140 USD gach frithealaiche gach mìos), agus ann am bun-structar sgòthan a tha a ’sgèileadh gu fèin-ghluasadach tha na suimean a’ cur suas car mòr. Ged a tha roghainn Pay-Mar-You-Go ann, le bhith a’ comasachadh New Relic feumaidh tu an tagradh ath-thòiseachadh, a dh’ fhaodadh gun caill thu an suidheachadh trioblaideach airson an deach a thòiseachadh. O chionn ghoirid, thug New Relic a-steach plana taraifean ùr - Bunaitean, - a tha aig a’ chiad sealladh coltach ri roghainn reusanta eile an àite Proifeasanta ... ach às deidh sgrùdadh nas mionaidiche thàinig e a-mach gu bheil cuid de dhleastanasan cudromach a dhìth (gu sònraichte, chan eil Prìomh Ghnìomhan, Lorg tar-iarrtas, Tracadh air a chuairteachadh).

Mar thoradh air an sin, thòisich sinn a 'smaoineachadh mu bhith a' coimhead airson roghainn nas saoire, agus thuit ar roghainn air dà sheirbheis: Datadog agus Atatus. Carson orra?

Mu dheidhinn farpaisich

Leig leam a ràdh anns a 'bhad gu bheil fuasglaidhean eile air a' mhargaidh. Bheachdaich sinn eadhon air roghainnean Open Source, ach chan eil comas an-asgaidh aig a h-uile neach-dèiligidh fuasglaidhean fèin-aoigheachd a chumail ... - a bharrachd air an sin, bidh feum aca air cumail suas a bharrachd. Thionndaidh a’ chàraid a thagh sinn a-mach mar an fheadhainn as fhaisge air ar feuman:

taic stèidhichte agus leasaichte airson tagraidhean PHP (tha stac ar luchd-dèiligidh glè eadar-mheasgte, ach tha seo na stiùiriche soilleir ann an co-theacsa a bhith a’ lorg roghainn eile an àite New Relic);
cosgais ruigsinneach (nas lugha na 100 USD gach mìos gach aoigh);
uidheamachd fèin-ghluasadach;
amalachadh le Kubernetes;
Tha an rud a tha coltach ris an eadar-aghaidh New Relic na bhuannachd follaiseach (seach gu bheil na h-innleadairean againn cleachdte ris).

Mar sin, aig a’ chiad ìre taghaidh, chuir sinn às do ghrunn fhuasglaidhean mòr-chòrdte eile, agus gu sònraichte:

Tideways, AppDynamics agus Dynatrace - airson cosgais;
Tha Stackify air a bhacadh ann an Caidreachas na Ruis agus a’ sealltainn ro bheag de dhàta.

Tha an còrr den artaigil air a structaradh ann an dòigh is gum bi na fuasglaidhean sin air an taisbeanadh goirid an-toiseach, agus às deidh sin bruidhnidh mi mun eadar-obrachadh àbhaisteach againn le New Relic agus eòlas / beachdan bho bhith a’ coileanadh gnìomhachd coltach ris ann an seirbheisean eile.

Taisbeanadh de na farpaisich taghte

air a ' Cuairt Ùr, is dòcha gu bheil a h-uile duine air cluinntinn? Thòisich an t-seirbheis seo air a leasachadh còrr is 10 bliadhna air ais, ann an 2008. Tha sinn air a bhith ga chleachdadh gu gnìomhach bho 2012 agus cha robh duilgheadas sam bith againn a bhith ag amalachadh àireamh fìor mhòr de thagraidhean ann am PHP, Ruby agus Python, agus tha eòlas air a bhith againn cuideachd a bhith ag amalachadh le C # and Go. Tha fuasglaidhean aig ùghdaran na seirbheis airson sùil a chumail air tagraidhean, bun-structar, lorg bun-structaran microservice, chruthaich tagraidhean goireasach airson innealan luchd-cleachdaidh, agus mòran a bharrachd.

Ach, bidh an neach-ionaid New Relic a’ ruith air protocolaidhean seilbhe agus chan eil e a’ toirt taic do OpenTracing. Feumaidh ionnsramaid adhartach deasachaidhean gu sònraichte airson New Relic. Mu dheireadh, tha taic Kubernetes fhathast deuchainneach.

Thòisich a leasachadh ann an 2010 Dàta a’ coimhead gu math nas inntinniche na New Relic dìreach a thaobh cleachdadh ann an àrainneachdan Kubernetes. Gu sònraichte, tha e a ’toirt taic do aonachadh le NGINX Ingress, cruinneachadh logaichean, statsd agus protocolaidhean OpenTracing, a leigeas leat sùil a chumail air iarrtas neach-cleachdaidh bhon mhionaid a tha e ceangailte ri crìochnachadh, a bharrachd air logaichean a lorg airson an iarrtas seo (an dà chuid air taobh frithealaiche lìn agus air luchd-cleachdaidh).

Nuair a bha sinn a’ cleachdadh Datadog, thachair sinn gun do thog e uaireannan am mapa microservice gu ceàrr, agus cuid de lochdan teicnigeach. Mar eisimpleir, dh’ ainmich e an seòrsa seirbheis (a’ mearachdachadh Django airson seirbheis tasgadan) agus dh’ adhbhraich e 500 mearachd ann an tagradh PHP a’ cleachdadh leabharlann mòr-chòrdte Predis.

Atatus - an inneal as òige; chaidh an t-seirbheis a chuir air bhog ann an 2014. Tha e soilleir gu bheil am buidseat margaidheachd aige nas ìsle na na farpaisich clàraichte, chan eil iomraidhean mòran nas cumanta. Ach, tha an inneal fhèin glè choltach ri New Relic, chan ann a-mhàin anns na comasan aige (APM, sgrùdadh brabhsair, msaa), ach cuideachd ann an coltas.

Is e ana-cothrom mòr a th’ ann nach eil e a’ toirt taic ach do Node.js agus PHP. Air an làimh eile, tha e air a chuir an gnìomh gu math nas fheàrr na Datadog. Eu-coltach ris an fhear mu dheireadh, chan fheum Atatus tagraidhean gus atharrachaidhean a dhèanamh no bileagan a bharrachd a chuir ris a’ chòd.

Mar a bhios sinn ag obair le New Relic

A-nis leig dhuinn sùil a thoirt air mar a bhios sinn a’ cleachdadh New Relic san fharsaingeachd. Canaidh sinn gu bheil duilgheadas againn a dh’ fheumas fuasgladh:

Tha e furasta fhaicinn air a’ ghraf frasair - Dèanamaid anailis air. Ann an New Relic, tha gnothaichean lìn air an taghadh sa bhad airson tagradh lìn, tha a h-uile pàirt air a chomharrachadh anns a’ ghraf coileanaidh, tha pannalan ìre-mearachd, ìre-iarrtais... Is e an rud as cudromaiche gun urrainn dhut gluasad gu dìreach bho na pannalan sin eadar diofar pàirtean den tagradh (mar eisimpleir, ma bhriogas tu air MySQL leanaidh sin gu roinn an stòr-dàta).

Leis gu bheil sinn a’ faicinn àrdachadh ann an gnìomhachd san eisimpleir a tha fo bheachdachadh PHP, cliog air a’ chairt seo agus rach gu fèin-ghluasadach gu Gnìomhan:

Tha an liosta de ghnothaichean, a tha gu ìre mhòr nan luchd-riaghlaidh bhon mhodail MVC, air a rèiteachadh mu thràth A 'mhòr-chuid a' caitheamh ùine, a tha gu math goireasach: chì sinn sa bhad dè a bhios an tagradh a’ dèanamh. Seo eisimpleirean de cheistean fada a bhios air an cruinneachadh gu fèin-ghluasadach le New Relic. Le bhith ag atharrachadh seòrsachadh, tha e furasta a lorg:

an rianadair tagraidh as luchdaichte;
rianadair a dh’iarradh as trice;
an luchd-riaghlaidh as slaodaiche.

A bharrachd air an sin, faodaidh tu gach gnothach a leudachadh agus faicinn dè bha an tagradh a’ dèanamh aig an àm a chaidh an còd a chuir gu bàs:

Mu dheireadh, bidh an tagradh a’ stòradh eisimpleirean de lorgan iarrtasan fada (an fheadhainn a bheir barrachd air 2 dhiog). Seo am pannal airson malairt fhada:

Chìthear gu bheil dà dhòigh-obrach a 'toirt mòran ùine, agus aig an aon àm an àm nuair a chaidh an t-iarrtas a chur gu bàs, tha an URI agus an àrainn aige cuideachd air an sealltainn. Glè thric bidh seo a 'cuideachadh gus an t-iarrtas a lorg anns na logaichean. A’ dol gu Lorg mion-fhiosrachadh, chì thu cò às a tha na dòighean sin air an ainmeachadh:

Рђ РІ Stòr-dàta ceistean - dèan measadh air ceistean gu stòran-dàta a chaidh a chuir gu bàs fhad ‘s a bha an tagradh a’ ruith:

Leis an eòlas seo, is urrainn dhuinn measadh a dhèanamh air carson a tha an tagradh a’ slaodadh sìos agus obrachadh leis an leasaiche gus ro-innleachd a chruthachadh gus an duilgheadas fhuasgladh. Ann an da-rìribh, chan eil New Relic an-còmhnaidh a’ toirt dealbh soilleir, ach bidh e a’ cuideachadh le bhith a’ taghadh vectar sgrùdaidh:

fada PDO::Construct threòraich sinn gu gnìomhachd neònach pgpoll;
neo-sheasmhachd thar ùine Memcache::Get mholainn gun deach an inneal mas-fhìor a rèiteachadh gu ceàrr;
dh'adhbhraich àrdachadh amharasach ùine airson giullachd teamplaid gu lùb neadachaidh a’ sgrùdadh làthaireachd 500 avatars ann an stòradh stuthan;
msaa…

Tha e cuideachd a 'tachairt, an àite a bhith a' cur an gnìomh còd, gu bheil rudeigin co-cheangailte ri stòradh dàta taobh a-muigh a 'fàs air a' phrìomh sgrion - agus chan eil e gu diofar dè a bhios ann: Redis no PostgreSQL - tha iad uile falaichte anns an taba stòr-dàta.

Faodaidh tu bunait sònraichte a thaghadh airson rannsachadh agus ceistean a sheòrsachadh - coltach ri mar a tha e air a dhèanamh ann an Gnìomhan. Agus le bhith a’ dol chun taba iarrtas, chì thu cia mheud uair a bhios an t-iarrtas seo a’ tachairt anns gach rianadair tagraidh, agus cuideachd dèan tuairmse air dè cho tric a thèid a ghairm. Tha e glè chofhurtail:

Tha dàta coltach ris an taba Seirbheisean a-muigh, a bhios a’ falach iarrtasan gu seirbheisean HTTP taobh a-muigh, leithid faighinn gu stòradh stuthan, a’ cur thachartasan gu sentry, no an leithid. Tha susbaint an taba gu tur coltach ri stòran-dàta:

Farpaisich: cothroman agus beachdan

A-nis is e an rud as inntinniche coimeas a dhèanamh eadar comasan New Relic leis na tha farpaisich a’ tabhann. Gu mì-fhortanach, cha b’ urrainn dhuinn na trì innealan fheuchainn air aon dreach de aon iarrtas a bha a’ ruith ann an riochdachadh. Ach, dh’ fheuch sinn ri coimeas a dhèanamh eadar suidheachaidhean/rèiteachaidhean a bha cho co-ionann sa ghabhas.

1. Dàta

Tha Datadog a’ cur fàilte oirnn le pannal le balla de sheirbheisean:

Bidh e a’ feuchainn ri tagraidhean a bhriseadh a-steach do cho-phàirtean / meanbh-sheirbheisean, mar sin san eisimpleir de thagradh Django chì sinn 2 cheangal ri PostgreSQL (defaultdb и postgres), a bharrachd air Celery, Redis. Le bhith ag obair le Datadog feumaidh tu nach bi ach glè bheag de eòlas agad air prionnsapalan MVC: feumaidh tu tuigsinn cò às a tha iarrtasan luchd-cleachdaidh mar as trice a’ tighinn. Mar as trice bidh seo na chuideachadh mapa seirbheisean:

Co-dhiù, tha rudeigin coltach ris ann an New Relic:

... agus tha am mapa aca, nam bheachd-sa, air a dhèanamh nas sìmplidh agus nas soilleire: chan eil e a’ taisbeanadh na pàirtean de aon iarrtas (a dhèanadh e ro mhionaideach, mar ann an cùis Datadog), ach dìreach seirbheisean no microservices sònraichte.

Tillidh sinn gu Datadog: bhon mhapa seirbheis chì sinn gu bheil iarrtasan luchd-cleachdaidh a’ tighinn gu Django. Rachamaid gu seirbheis Django agus mu dheireadh chì sinn na bha sinn an dùil:

Gu mì-fhortanach, chan eil graf an seo gu bunaiteach ùine malairt eadar-lìn, coltach ris na chì sinn air a’ phrìomh phannal New Relic. Ach, faodar a rèiteachadh an àite a’ chlàr-ama % den ùine a chaidh a chaitheamh. Tha e gu leòr airson tionndadh gu Ùine cuibheasach gach iarrtas a rèir Seòrsa... agus a-nis tha an graf eòlach a 'coimhead oirnn!

Tha carson a thagh Datadog cairt eadar-dhealaichte na dhìomhaireachd dhuinn. Is e rud sàrachail eile nach eil cuimhne aig an t-siostam air roghainn an neach-cleachdaidh (eu-coltach ris an dà cho-fharpaiseach), agus mar sin is e an aon fhuasgladh pannalan àbhaisteach a chruthachadh.

Ach bha mi toilichte leis a’ chomas ann an Datadog gluasad bho na grafaichean sin gu meatrach frithealaichean co-cheangailte, na logaichean a leughadh agus measadh a dhèanamh air an luchd air luchd-làimhseachaidh frithealaiche lìn (Gunicorn). Tha a h-uile dad cha mhòr mar a tha e ann an New Relic ... agus eadhon beagan a bharrachd (logaichean)!

Fo na grafaichean tha gnothaichean gu tur coltach ri New Relic:

Ann an Datadog, canar gnothaichean ris goireasan. Faodaidh tu luchd-riaghlaidh a sheòrsachadh a rèir an àireamh de dh’ iarrtasan, a rèir ùine freagairt cuibheasach, agus leis an ùine as motha a thèid a chaitheamh airson ùine taghte.

Faodaidh tu an goireas a leudachadh agus a h-uile dad a chunnaic sinn mu thràth ann an New Relic fhaicinn:

Tha staitistigean ann mun ghoireas, liosta coitcheann de fhiosan a-staigh, agus eisimpleirean de dh'iarrtasan a dh'fhaodar a rèiteachadh le còd freagairt... Air an t-slighe, chòrd an t-seòrsachadh seo gu mòr ris na h-innleadairean againn.

Faodar goireas eisimpleir sam bith ann an Datadog fhosgladh agus a sgrùdadh:

Tha paramadairean iarrtas, clàr geàrr-chunntas den ùine a chaidh a chaitheamh air gach pàirt, agus clàr eas a’ sealltainn sreath nan gairmean air an taisbeanadh. Faodaidh tu cuideachd atharrachadh gu sealladh craoibhe de chlàr an eas:

Agus is e an rud as inntinniche sùil a thoirt air luchd an aoigh air an deach an t-iarrtas a chuir gu bàs agus coimhead air na logaichean iarrtas.

Amalachadh sgoinneil!

Is dòcha gu bheil thu a’ faighneachd càite a bheil na tabaichean stòr-dàta и Seirbheisean a-muigh, mar ann an New Relic. Chan eil gin an seo: leis gu bheil Datadog a’ roinn an tagradh gu co-phàirtean, thèid beachdachadh air PostgreSQL seirbheis air leth, agus an àite Seirbheisean Taobh a-muigh is fhiach coimhead air aws.storage (bidh e coltach ris a h-uile seirbheis taobh a-muigh eile a gheibh an aplacaid).

Seo eisimpleir le postgres:

Gu bunaiteach tha a h-uile dad a bha sinn ag iarraidh:

Chì thu dè an “seirbheis” às a thàinig an t-iarrtas.

Cha bhiodh e ceàrr a bhith gad chuimhneachadh gu bheil Datadog a’ fighe a-steach gu foirfe le NGINX Ingress agus a’ leigeil leat lorg deireadh-gu-deireadh a dhèanamh bhon mhionaid a ruigeas iarrtas a’ bhuidheann, agus leigidh e leat cuideachd statsd metrics fhaighinn, logaichean a chruinneachadh agus metrics aoigheachd. .

Is e buannachd mhòr de Datadog gu bheil a phrìs a ’gabhail cumadh bho sgrùdadh bun-structair, APM, Riaghladh Log agus deuchainn Synthetics, i.e. Faodaidh tu do phlana a thaghadh gu sùbailte.

2.Atatus

Tha sgioba Atatus ag agairt gu bheil an t-seirbheis aca “an aon rud ri New Relic, ach nas fheàrr.” Feuch sinn a bheil seo fìor.

Tha coltas coltach ris a’ phrìomh phannal, ach cha robh e comasach an Redis agus memcached a chaidh a chleachdadh san tagradh a dhearbhadh.

Bidh APM a’ taghadh a h-uile gnothach gu bunaiteach, ged mar as trice chan eil feum ach air gnothaichean lìn. Coltach ri Datadog, chan eil dòigh ann air seòladh chun t-seirbheis a tha thu ag iarraidh bhon phrìomh phannal. A bharrachd air an sin, tha gnothaichean air an liostadh às deidh mhearachdan, nach eil a’ coimhead gu math loidsigeach airson APM.

Ann an gnothaichean Atatus, tha a h-uile dad cho coltach ‘s a ghabhas ri New Relic. Is e an ana-cothrom nach eil daineamaigs gach rianadair ri fhaicinn sa bhad. Feumaidh tu coimhead air a shon anns a’ bhòrd rianadair, ga sheòrsachadh a rèir A 'mhòr-chuid de ùine air a chaitheamh:

Tha an liosta àbhaisteach de luchd-riaghlaidh ri fhaighinn anns an taba Rannsaich:

Ann an cuid de dhòighean, tha an clàr seo coltach ri Datadog agus is toil leam e nas fheàrr na an aon rud ann an New Relic.

Faodaidh tu gach gnothach a leudachadh agus faicinn dè bha an tagradh a’ dèanamh:

Tha am pannal cuideachd nas cuimhneachail air Datadog: tha grunn iarrtasan ann, dealbh coitcheann de ghairmean. Tha am pannal gu h-àrd a’ toirt seachad taba mearachd Fàilligidhean HTTP agus eisimpleirean de cheistean slaodach Lorgan Seisean:

Ma thèid thu gu malairt, chì thu eisimpleir de lorg, gheibh thu liosta de dh’ iarrtasan chun stòr-dàta agus coimhead air cinn-cinn nan iarrtasan. Tha a h-uile dad coltach ri New Relic:

San fharsaingeachd, bha Atatus toilichte le comharran mionaideach - às aonais an àbhaist New Relic a bhith a’ glaodhadh fiosan a-steach do bhloc cuimhneachaidh:

Ach, chan eil sìoltachan ann a ghearradh (mar New Relic) iarrtasan ultra-luath (<5ms). Air an làimh eile, bu toil leam taisbeanadh an fhreagairt malairt mu dheireadh (soirbheachas no mearachd).

Панель stòr-dàta cuidichidh e thu le bhith a’ sgrùdadh nan iarrtasan gu stòran-dàta taobh a-muigh a bhios an aplacaid a’ dèanamh. Leig leam do chuimhneachadh nach do lorg Atatus ach PostgreSQL agus MySQL, ged a tha Redis agus memcached cuideachd an sàs sa phròiseact.

Tha iarrtasan air an òrdachadh a rèir nan slatan-tomhais àbhaisteach: tricead freagairt, ùine freagairt cuibheasach, agus mar sin air adhart. Bu mhath leam cuideachd iomradh a thoirt air an taba leis na ceistean as slaodaiche - tha e gu math goireasach. A bharrachd air an sin, bha an dàta san taba seo airson PostgreSQL aig an aon àm ris an dàta bhon leudachadh pg_stat_aithrisean - toradh fìor mhath!

Tab Iarrtasan bhon taobh a-muigh gu tur co-ionann ri Stòr-dàta.

toraidhean

Rinn an dà inneal taisbeanaidh gu math ann an dreuchd APM. Faodaidh gin dhiubh an ìre as ìsle a tha a dhìth a thabhann. Faodar geàrr-chunntas a dhèanamh air na beachdan againn mar a leanas:

Dàta

Pros:

clàr prìsean goireasach (cosgais APM 31 USD gach aoigh);
dh'obraich e gu math le Python;
Comasach air aonachadh le OpenTracing
amalachadh le Kubernetes;
amalachadh le NGINX Ingress.

Cons:

an aon APM a dh'adhbhraich nach robh an tagradh ri fhaighinn air sgàth mearachd modal (predis);
fèin-ionnsramaid PHP lag;
mìneachadh neo-àbhaisteach air seirbheisean agus an adhbhar.

Atatus