{"id":93358,"date":"2020-09-06T07:42:57","date_gmt":"2020-09-06T05:42:57","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/monitorim-sportmaster-kak-i-chem"},"modified":"2020-09-06T07:42:57","modified_gmt":"2020-09-06T05:42:57","slug":"monitorim-sportmaster-kak-i-chem","status":"publish","type":"post","link":"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/monitorim-sportmaster-kak-i-chem","title":{"rendered":"Pratimo Sportmaster \u2014 kako i \u010dime","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"<p>O stvaranju sustava nadzora razmi\u0161ljali smo u fazi formiranja proizvodnih timova. Postalo je jasno da na\u0161 posao - operativna podr\u0161ka - ne pripada tim timovima.<\/p>\n<p>Razlog le\u017ei u tome \u0161to su svi na\u0161i timovi izgra\u0111eni oko pojedinih informacijskih sustava, mikroservisa i frontova, pa timovi ne vide op\u0107e stanje zdravlja cijelog sustava. Na primjer, mogu ne znati kako neki mali dio unutar dubokog backenda utje\u010de na frontend. Njihov interes ograni\u010den je na sustave s kojima je njihov sustav integriran. Ako tim i njegov servis A gotovo uop\u0107e nije povezan s servisom B, tada takav servis gotovo da je nevidljiv timu.<\/p>\n<p><noindex><a rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/sportmaster_lab\/blog\/517678\/\"><img decoding=\"async\" alt=\"Pratimo Sportmaster \u2014 kako i \u010dime\" src=\"\/wp-content\/uploads\/2020\/09\/393621991a8997d449cb3adec71b6af5.png\" style=\"display:block;margin: 0 auto;\" \/><\/a><\/noindex><\/p>\n<p>Na\u0161 tim, zauzvrat, radi sa sustavima koji su me\u0111usobno vrlo sna\u017eno integrirani: me\u0111u njima postoje mnoge veze, to je vrlo velika infrastruktura. I od svih tih sustava (kojih imamo, uzgred re\u010deno, ogroman broj) ovisi funkcioniranje internetske trgovine. <\/p>\n<p>Tako dolazimo do toga da na\u0161 odjel ne pripada nijednom timu, nego se nalazi malo izvan njih. U cijeloj ovoj pri\u010di na\u0161 zadatak je razumjeti cjelokupno kako funkcioniraju informacijski sustavi, njihovu funkcionalnost, integracije, softver, mre\u017eu, hardver i kako su sve to povezano.<br \/>\n<noindex><a rel=\"nofollow\" name=\"habracut\"><\/a><\/noindex><br \/>\nPlatforma na kojoj funkcioniraju na\u0161e internetske trgovine izgleda ovako:<\/p>\n<ul>\n<li>front<\/li>\n<li>middle-office<\/li>\n<li>back-office<\/li>\n<\/ul>\n<p>\nKoliko god \u017eeljeli, ne mo\u017ee se dogoditi da svi sustavi rade besprijekorno i bez problema. Problem ponovno le\u017ei u broju sustava i integracija - s takvim brojem, neki incidenti su neizbje\u017eni, bez obzira na kvalitetu testiranja. To se doga\u0111a kako unutar nekog pojedina\u010dnog sustava, tako i u pogledu njihove integracije. Potrebno je pratiti stanje cijele platforme cjelovito, a ne samo neku njezinu pojedina\u010dnu komponentu. <\/p>\n<p>Idealno, nadzor nad stanjem cijele platforme treba automatizirati. I do\u0161li smo do monitora kao neizbje\u017enog dijela ovog procesa. U po\u010detku je bio izgra\u0111en samo za frontend, dok su vlastiti sustavi nadzora slojeva postojali i postoje kod mre\u017enih in\u017eenjera, administratora softvera i hardvera. Svi ti ljudi pratili su nadzor samo na svom nivou, nitko nije imao cjelokupno razumijevanje.<\/p>\n<p>Na primjer, ako virtualna ma\u0161ina otka\u017ee, u ve\u0107ini slu\u010dajeva to zna samo administrator koji je odgovoran za hardver i virtualnu ma\u0161inu. Frontend tim u takvim slu\u010dajevima vidi samo da je aplikacija pala, ali nema podataka o padu virtualne ma\u0161ine. Administrator mo\u017ee znati tko je naru\u010ditelj i otprilike imati predstavu o tome \u0161to se trenutno odvija na toj virtualnoj ma\u0161ini, pod uvjetom da je rije\u010d o nekom velikom projektu. Za male projekte, vjerojatno ne zna. U svakom slu\u010daju, administrator se mora obratiti vlasniku i pitati \u0161to je bilo na toj ma\u0161ini, \u0161to treba obnoviti i \u0161to promijeniti. A ako se dogodila neka ozbiljna kvar, po\u010dela bi utrka oko toga \u2014 jer nitko nije mogao vidjeti sustav u cjelini.<\/p>\n<p>U kona\u010dnici, takve fragmentirane pri\u010de utje\u010du na cijeli frontend, na korisnike i na\u0161u osnovnu poslovnu funkciju \u2014 internet prodaju. Budu\u0107i da ne pripadamo timovima, nego se bavimo odr\u017eavanjem svih ecommerce aplikacija unutar internet trgovine, preuzeli smo zadatak izrade cjelovitog sustava pra\u0107enja ecommerce platforme. <\/p>\n<h2>Struktura sustava i stog<\/h2>\n<p>\nPo\u010deli smo tako \u0161to smo izdvojili nekoliko slojeva pra\u0107enja za na\u0161e sustave, unutar kojih \u0107emo morati prikupljati metrike. Sve to trebalo je spojiti, \u0161to smo i u\u010dinili u prvom koraku. Sada u tom koraku pobolj\u0161avamo \u0161to kvalitetnije prikupljanje metrika za sve na\u0161e slojeve kako bismo izgradili korelaciju i razumjeli kako sustavi utje\u010du jedni na druge.<\/p>\n<p>Nedostatak cjelovitog pra\u0107enja u po\u010detnim fazama pokretanja aplikacija (s obzirom na to da smo ga po\u010deli graditi kada je ve\u0107ina sustava bila u eksploataciji) dovelo je do zna\u010dajnog tehni\u010dkog duga u postavljanju pra\u0107enja cijele platforme. Nismo si mogli priu\u0161titi da se fokusiramo na postavljanje pra\u0107enja samo jednog IS-a i detaljno raditi na pra\u0107enju za njega jer bi ostali sustavi neko vrijeme ostali bez pra\u0107enja. Da bismo rije\u0161ili taj problem, odredili smo popis najpotrebnijih metrika za procjenu stanja informacijskog sustava po slojevima i po\u010deli ga implementirati.<\/p>\n<p>Stoga smo odlu\u010dili jesti slona po dijelovima.<\/p>\n<p>Na\u0161 sustav se sastoji od:<\/p>\n<ul>\n<li>hardvera; <\/li>\n<li>operativnog sustava; <\/li>\n<li>softvera; <\/li>\n<li>UI dijelovi u aplikaciji za pra\u0107enje; <\/li>\n<li>poslovne metrike; <\/li>\n<li>aplikacije za integraciju; <\/li>\n<li>informacijske sigurnosti; <\/li>\n<li>mre\u017ee; <\/li>\n<li>balansiranjem prometa. <\/li>\n<\/ul>\n<p>\n<img decoding=\"async\" alt=\"Pratimo Sportmaster \u2014 kako i \u010dime\" src=\"\/wp-content\/uploads\/2020\/09\/687a5b8b39b3fd540a9b591f49a019d3.png\" style=\"display:block;margin: 0 auto;\" \/><br \/>\n<br \/>\nU sredi\u0161tu ovog sustava je samo pra\u0107enje. Da biste op\u0107enito razumjeli stanje cijelog sustava, morate znati \u0161to se doga\u0111a s aplikacijama na svim tim razinama i kroz raznolikost aplikacija. <\/p>\n<p>Dakle, o stogu. <\/p>\n<p><img decoding=\"async\" alt=\"Pratimo Sportmaster \u2014 kako i \u010dime\" src=\"\/wp-content\/uploads\/2020\/09\/b9a9b86d788990899e7f04e34fb879d9.png\" style=\"display:block;margin: 0 auto;\" \/><br \/>\n<br \/>\nKoristimo softver s otvorenim izvorom. U sredi\u0161tu nam je Zabbix, koji koristimo prvenstveno kao sustav za upozorenja. Svi znaju da je idealan za pra\u0107enje infrastrukture. \u0160to se ovdje podrazumijeva? Upravo one niskonivojske metrike koje ima svaka tvrtka koja ima svoje podatkovne centre (a Sportmaster ima svoje podatkovne centre) \u2014 temperatura servera, stanje memorije, RAID-a, metri\u010dke mre\u017enih ure\u0111aja.<\/p>\n<p>Integrirali smo Zabbix s aplikacijama za razmjenu poruka, Telegram i Microsoft Teams, koje se aktivno koriste u timovima. Zabbix pokriva sloj stvarne mre\u017ee, hardvera i djelomi\u010dno softvera, ali to nije panaceja. Te podatke oboga\u0107ujemo iz nekih drugih usluga. Na primjer, na razini hardverske opreme direktno se preko API-ja povezuju u na\u0161oj virtualizacijskoj vezi i povla\u010dimo podatke. <\/p>\n<p>\u0160to jo\u0161. Osim Zabbixa koristimo Prometheus, koji omogu\u0107uje pra\u0107enje metrika u aplikaciji dinami\u010dkog okru\u017eenja. To jest, mo\u017eemo dobivati metrike aplikacije putem HTTP endpointa i ne brinuti se o tome koje metrike u\u010ditati a koje ne. Na temelju tih podataka mo\u017eemo razvijati analiti\u010dke upite.<\/p>\n<p>Izvori podataka za ostale slojeve, kao \u0161to su poslovne metrike, dijelimo na tri dijela.<\/p>\n<p>Prvo, to su vanjski poslovni sustavi, Google Analytics, prikupljamo metrike iz zapisnika. Od njih dobivamo podatke o aktivnim korisnicima, konverzijama i svemu ostalom povezanom s poslovanjem. Drugo, to je sustav UI pra\u0107enja. O tome treba detaljnije razgovarati.<\/p>\n<p>Nekada smo po\u010deli s ru\u010dnim testiranjem koje je preraslo u automatske testove funkcionalnosti i integracija. Od toga smo napravili pra\u0107enje, zadr\u017eav\u0161i samo osnovnu funkcionalnost i vezali se uz markere koji su maksimalno stabilni i ne mijenjaju se \u010desto tijekom vremena.<\/p>\n<p>Nova struktura timova podrazumijeva da se cijela aktivnost vezana uz aplikacije centralizira na proizvodne timove, pa smo prestali s \u010distim testiranjem. Umjesto toga, od testova smo stvorili UI-monitoring, napisan u Javi, Seleniumu i Jenkinsu (koji se koristi kao sustav za pokretanje i generiranje izvje\u0161taja). <\/p>\n<p>Imali smo puno testova, ali na kraju smo odlu\u010dili i\u0107i na glavnu cestu, visoko razinu metrike. Ako budemo imali puno specifi\u010dnih testova, bit \u0107e te\u0161ko odr\u017eavati a\u017eurnost podataka. Svako sljede\u0107e izdanje \u0107e zna\u010dajno lomiti cijeli sustav, a mi \u0107emo se samo baviti njegovim popravljanjem. Stoga smo se usredoto\u010dili na temeljnije stvari koje se rijetko mijenjaju i nadziramo samo njih.<\/p>\n<p>Kona\u010dno, tre\u0107e, izvor podataka je centralizirani sustav logiranja. Za logove koristimo Elastic Stack, a zatim te podatke mo\u017eemo preuzeti u na\u0161 sustav pra\u0107enja poslovnih metrika. Uz to, radi na\u0161 vlastiti Monitoring API servis, napisan u Pythonu, koji poziva bilo koje servise putem API-ja i povla\u010di podatke u Zabbix.<\/p>\n<p>Jo\u0161 jedan neizostavni atribut monitoringa je vizualizacija. Ona se kod nas gradi na temelju Grafane. Me\u0111u drugim sustavima vizualizacije, izdvaja se po tome \u0161to se na nadzornoj plo\u010di mogu vizualizirati metrike iz razli\u010ditih izvora podataka. Mo\u017eemo prikupiti visoko razine metrike internetskih trgovina, kao \u0161to su broj narud\u017ebi realiziranih u posljednjem satu iz RDBMS-a, metrike izvedbe OS-a na kojem ta internetska trgovina radi iz Zabbixa, a metrike instanci te aplikacije iz Prometheusa. I sve \u0107e to biti na jednom nadzornoj plo\u010di. Jasno i dostupno.<\/p>\n<p>Napominjem o sigurnosti \u2014 trenutno dovr\u0161avamo sustav koji \u0107emo kasnije integrirati s globalnim sustavom monitoringa. Po mom mi\u0161ljenju, glavni problemi s kojima se suo\u010dava e-trgovina u podru\u010dju informati\u010dke sigurnosti odnose se na robote, skeneri i brute force napade. Na to se treba paziti, jer sve to mo\u017ee kriti\u010dno utjecati na rad na\u0161ih aplikacija, kao i na reputaciju u poslovnom smislu. S odabranim stakom uspje\u0161no pokrivamo te zadatke.<\/p>\n<p>Jo\u0161 jedna va\u017ena stvar \u2014 razina aplikacija se prikuplja pomo\u0107u Prometheusa. I on je tako\u0111er integriran s Zabbixom. Osim toga, imamo sitespeed, uslugu koja nam omogu\u0107ava da pratimo parametre poput brzine u\u010ditavanja na\u0161e stranice, uskih grla, renderiranja stranice, u\u010ditavanja skripti i sli\u010dno, koja je tako\u0111er integrirana putem API-ja. Dakle, metrike se prikupljaju u Zabbixu, a alerte \u0161aljemo iz tog sustava. Sve alerte trenutno se \u0161alju putem glavnih kanala (za sada su to email i telegram, a nedavno smo dodali i MS Teams). U planu je unaprijediti alerting do razine gdje pametni botovi rade kao usluga i pru\u017eaju informacije o monitoringu svim zainteresiranim timovima proizvoda. <\/p>\n<p>Za nas su va\u017ene metrike ne samo pojedina\u010dnih informacijskih sustava, ve\u0107 i op\u0107e metrike cijele infrastrukture koju koriste aplikacije: klasteri <a class=\"wpil_keyword_link\" href=\"https:\/\/prohoster.info\/hr\/server\/\"   title=\"fizi\u010dkih servera\" data-wpil-keyword-link=\"linked\"  data-wpil-monitor-id=\"1270\">fizi\u010dkih servera<\/a>, na kojima rade virtualne ma\u0161ine, balansatori optere\u0107enja, Network Load Balancer-i, sama mre\u017ea, iskori\u0161tenje komunikacijskih kanala. Plus, metrike za na\u0161e vlastite podatkovne centre (imamo ih nekoliko i infrastruktura je prili\u010dno zna\u010dajna). <\/p>\n<p><img decoding=\"async\" alt=\"Pratimo Sportmaster \u2014 kako i \u010dime\" src=\"\/wp-content\/uploads\/2020\/09\/aaee82a501dce0eee31c5a81662cd8be.png\" style=\"display:block;margin: 0 auto;\" \/><br \/>\n<br \/>\nPrednosti na\u0161eg sustava monitoringa su u tome \u0161to nam omogu\u0107ava da vidimo stanje funkcionalnosti svih sustava, mo\u017eemo procijeniti njihov utjecaj jedni na druge i na op\u0107e resurse. A na kraju, to nam omogu\u0107uje planiranje resursa, \u0161to tako\u0111er spada u na\u0161u odgovornost. Upravljamo serverskim resursima \u2014 skupinom u okviru e-commerce, uvodimo i isklju\u010dujemo novo opremu, kupujemo novo, provodimo reviziju iskori\u0161tenosti resursa i sli\u010dno. Svake godine timovi planiraju nove projekte, razvijaju svoje sustave, a nama je va\u017eno osigurati im resurse. <\/p>\n<p>I putem metrika vidimo trend potro\u0161nje resursa na\u0161im informacijskim sustavima. Ve\u0107 na temelju njih mo\u017eemo planirati. Na razini virtualizacije prikupljamo podatke i vidimo informacije o dostupnom broju resursa prema podatkovnim centrima. A unutar podatkovnog centra vidljiva je i iskori\u0161tenost, i stvarna raspodjela, potro\u0161nja resursa. I to kako s standalone serverima, tako i s virtualnim ma\u0161inama i klasterima fizi\u010dkih servera, na kojima sve te virtualke aktivno rade. <\/p>\n<h2>Perspektive<\/h2>\n<p>\nSada imamo gotovo jezgro sustava u cjelini, ali ostalo je jo\u0161 nekoliko aspekata na kojima treba raditi. Minimalno, to je sloj informacijske sigurnosti, ali tako\u0111er je va\u017eno do\u0107i do mre\u017ee, razviti alertering i rije\u0161iti pitanje korelacije. Imamo mnogo slojeva i sustava, a na svakom sloju postoje brojne metrike. To postaje matrjo\u0161ka na razini matrjo\u0161ke.<\/p>\n<p>Na\u0161 cilj je na kraju napraviti ispravne alerte. Na primjer, ako do\u0111e do problema s hardverskim dijelom, ponovo, s virtualnom ma\u0161inom, a tamo je bila va\u017ena aplikacija koja nije bila rezervirana. Saznat \u0107emo da je virtualna ma\u0161ina umrla. Zatim \u0107e se alertirati poslovne metrike: korisnici su negdje nestali, konverzija je nestala, UI u su\u010delju nije dostupan, softver i servisi su tako\u0111er umrli.<\/p>\n<p>U takvom rasporedu dobit \u0107emo spam od alertinga, a to se ve\u0107 ne uklapa u format ispravnog sustava nadzora. Postavlja se pitanje korelacije. Stoga, idealno, na\u0161 sustav nadzora trebao bi re\u0107i: \u201eLjudi, va\u0161a fizi\u010dka ma\u0161ina je umrla, a zajedno s njom ova aplikacija i takve metrike\u201c, pomo\u0107u jednog alertera umjesto da nas zasipava stotinama alertera. Treba obavijestiti o glavnom \u2014 o uzroku, \u0161to poma\u017ee brzom rje\u0161avanju problema kroz njegovu lokalizaciju.<\/p>\n<p>Na\u0161 sustav obavijesti i obrada alertera izgra\u0111ena je oko 24-satne slu\u017ebe za hitne slu\u010dajeve. Svi alerteri koje smatramo bitnima i koji su na na\u0161oj kontrolnoj listi se \u0161alju tamo. Svaki alerter mora sadr\u017eavati opis: \u0161to se dogodilo, \u0161to to zapravo zna\u010di, na \u0161to utje\u010de. I jo\u0161 link na nadzornu plo\u010du i upute \u0161to u\u010diniti u tom slu\u010daju. <\/p>\n<p>To je sve \u0161to se ti\u010de zahtjeva za izgradnju alertinga. Dalje, situacija mo\u017ee i\u0107i u dva smjera \u2014 ili postoji problem koji treba rije\u0161iti, ili je do\u0161lo do kvara u sustavu nadzora. No, u svakom slu\u010daju, treba i\u0107i i istra\u017eiti.<\/p>\n<p>U prosjeku trenutno primamo oko stotinu alertera dnevno, uzimaju\u0107i u obzir da korelacija alertera jo\u0161 nije ispravno postavljena. I ako je potrebno obaviti tehni\u010dke radove, a ne\u0161to prisilno isklju\u010dimo, njihov broj naglo raste. <\/p>\n<p>Osim pra\u0107enja sustava koje eksploatiramo i prikupljanja metrika koje smatramo va\u017enima, sustav pra\u0107enja omogu\u0107uje prikupljanje podataka za produktne timove. Oni mogu utjecati na sastav metrika unutar informacijskih sustava koji se kod nas prate. <\/p>\n<p>Na\u0161 kolega mo\u017ee do\u0107i i zamoliti nas da dodamo neku metriku koja \u0107e biti korisna i za nas i za tim. Ili, na primjer, timu mo\u017eda nedostaju osnovne metrike koje imamo, a potrebne su im specifi\u010dne. U Grafani kreiramo prostor za svaki tim i dodjeljujemo administratorska prava. Tako\u0111er, ako timu trebaju nadzorne plo\u010de, a oni sami ne mogu\/ne znaju to u\u010diniti, poma\u017eemo im. <\/p>\n<p>Budu\u0107i da nismo uklju\u010deni u proces stvaranja vrijednosti tima, njihovih izdanja i planiranja, postupno dolazimo do toga da su izdanja svih sustava besprijekorna i mogu se objavljivati dnevno, bez prethodnog usugla\u0161avanja s nama. A nama je va\u017eno pratiti ta izdanja jer potencijalno mogu utjecati na rad aplikacije i ne\u0161to pokvariti, a to je kriti\u010dno. Za upravljanje izdanjima koristimo Bamboo, odakle preko API-ja dobivamo podatke i mo\u017eemo vidjeti koja su izdanja u kojim informacijskim sustavima objavljena i njihov status. I najva\u017enije \u2014 u koje vrijeme. Oznake o izdanjima postavljamo na glavne kriti\u010dne metrike, \u0161to vizualno daje zna\u010dajan uvid u slu\u010daju problema.<\/p>\n<p>Na taj na\u010din mo\u017eemo vidjeti korelaciju izme\u0111u novih izdanja i nastalih problema. Osnovna ideja je razumjeti kako sustav radi na svim razinama, brzo lokalizirati problem i jednako brzo ga ispraviti. \u010cesto se pokazuje da vi\u0161e vremena zahtijeva ne rje\u0161enje problema, nego pronala\u017eenje uzroka. <\/p>\n<p>U ovom podru\u010dju se u budu\u0107nosti \u017eelimo fokusirati na proaktivnost. Idealno bi bilo unaprijed saznati za pribli\u017eavaju\u0107i problem, a ne post festum, kako bismo se bavili njegovim spre\u010davanjem, a ne rje\u0161avanjem. Ponekad se doga\u0111aju la\u017eni alarmi sustava nadzora, kako zbog ljudske pogre\u0161ke, tako i zbog promjena u aplikacijama. Radimo na tome, usavr\u0161avamo sustav i nastojimo upozoriti korisnike koji ga koriste zajedno s nama prije bilo kakvih manipulacija sustavom nadzora, ili provodimo te aktivnosti u tehni\u010dkom prozoru. <\/p>\n<p>Dakle, sustav je pokrenut i uspje\u0161no radi od po\u010detka prolje\u0107a... i pokazuje prili\u010dno stvarnu dobit. Naravno, to nije njegova kona\u010dna verzija, jo\u0161 \u0107emo implementirati mno\u0161tvo korisnih stvari. No, upravo sada, uz toliki broj integracija i aplikacija, bez automatizacije nadzora zaista se ne mo\u017ee.<\/p>\n<p>Ako i vi nadzirete velike projekte s ozbiljnim brojem integracija \u2014 napi\u0161ite u komentarima koju ste srebrnu kuglu prona\u0161li za to.<br \/>\n<br \/>Izvor: <a content=\"nofollow\" rel=\"nofollow\" href=\"https:\/\/habr.com\/ru\/company\/sportmaster_lab\/blog\/517678\/\">habr.com<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"<p>\u041e \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430 \u043c\u044b \u0437\u0430\u0434\u0443\u043c\u0430\u043b\u0438\u0441\u044c \u043d\u0430 \u044d\u0442\u0430\u043f\u0435 \u0444\u043e\u0440\u043c\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432\u044b\u0445 \u043a\u043e\u043c\u0430\u043d\u0434. \u0421\u0442\u0430\u043b\u043e \u043f\u043e\u043d\u044f\u0442\u043d\u043e, \u0447\u0442\u043e \u043d\u0430\u0448\u0435 \u0434\u0435\u043b\u043e \u2014 \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0430\u0446\u0438\u044f \u2014 \u0432 \u044d\u0442\u0438 \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u043d\u0438\u043a\u0430\u043a \u043d\u0435 \u043f\u043e\u043f\u0430\u0434\u0430\u0435\u0442. \u041f\u043e\u0447\u0435\u043c\u0443 \u0442\u0430\u043a? \u0414\u0435\u043b\u043e \u0432 \u0442\u043e\u043c, \u0447\u0442\u043e \u0432\u0441\u0435 \u043d\u0430\u0448\u0438 \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u043f\u043e\u0441\u0442\u0440\u043e\u0435\u043d\u044b \u0432\u043e\u043a\u0440\u0443\u0433 \u043e\u0442\u0434\u0435\u043b\u044c\u043d\u044b\u0445 \u0438\u043d\u0444\u043e\u0440\u043c\u0430\u0446\u0438\u043e\u043d\u043d\u044b\u0445 \u0441\u0438\u0441\u0442\u0435\u043c, \u043c\u0438\u043a\u0440\u043e\u0441\u0435\u0440\u0432\u0438\u0441\u043e\u0432 \u0438 \u0444\u0440\u043e\u043d\u0442\u043e\u0432, \u043f\u043e\u044d\u0442\u043e\u043c\u0443 \u043e\u0431\u0449\u0435\u0435 \u0441\u043e\u0441\u0442\u043e\u044f\u043d\u0438\u0435 \u0437\u0434\u043e\u0440\u043e\u0432\u044c\u044f \u0432\u0441\u0435\u0439 \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u0432 \u0446\u0435\u043b\u043e\u043c \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u043d\u0435 \u0432\u0438\u0434\u044f\u0442. \u041d\u0430\u043f\u0440\u0438\u043c\u0435\u0440, \u043e\u043d\u0438 [&hellip;]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":93359,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-93358","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t<!-- All in One SEO 5.0.5 - aioseo.com -->\n\t<meta name=\"description\" content=\"\u041e \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430 \u043c\u044b \u0437\u0430\u0434\u0443\u043c\u0430\u043b\u0438\u0441\u044c \u043d\u0430 \u044d\u0442\u0430\u043f\u0435 \u0444\u043e\u0440\u043c\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432\u044b\u0445 \u043a\u043e\u043c\u0430\u043d\u0434. \u0421\u0442\u0430\u043b\u043e \u043f\u043e\u043d\u044f\u0442\u043d\u043e, \u0447\u0442\u043e \u043d\u0430\u0448\u0435 \u0434\u0435\u043b\u043e \u2014 \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0430\u0446\u0438\u044f \u2014 \u0432 \u044d\u0442\u0438 \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u043d\u0438\u043a\u0430\u043a \u043d\u0435 \u043f\u043e\u043f\u0430\u0434\u0430\u0435\u0442.\" \/>\n\t<meta name=\"robots\" content=\"max-image-preview:large\" \/>\n\t<meta name=\"author\" content=\"Yuri Gagarin\"\/>\n\t<link rel=\"canonical\" href=\"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/monitorim-sportmaster-kak-i-chem\" \/>\n\t\t<meta name=\"generator\" content=\"All in One SEO (AIOSEO) 5.0.5\" \/>\n\t\t<meta property=\"og:locale\" content=\"hr_HR\" \/>\n\t\t<meta property=\"og:site_name\" content=\"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b\" \/>\n\t\t<meta property=\"og:type\" content=\"article\" \/>\n\t\t<meta property=\"og:title\" content=\"\ud83e\udd47\u041c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043c \u0421\u043f\u043e\u0440\u0442\u043c\u0430\u0441\u0442\u0435\u0440 \u2014 \u043a\u0430\u043a \u0438 \u0447\u0435\u043c | ProHoster\" \/>\n\t\t<meta property=\"og:description\" content=\"\u041e \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430 \u043c\u044b \u0437\u0430\u0434\u0443\u043c\u0430\u043b\u0438\u0441\u044c \u043d\u0430 \u044d\u0442\u0430\u043f\u0435 \u0444\u043e\u0440\u043c\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432\u044b\u0445 \u043a\u043e\u043c\u0430\u043d\u0434. \u0421\u0442\u0430\u043b\u043e \u043f\u043e\u043d\u044f\u0442\u043d\u043e, \u0447\u0442\u043e \u043d\u0430\u0448\u0435 \u0434\u0435\u043b\u043e \u2014 \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0430\u0446\u0438\u044f \u2014 \u0432 \u044d\u0442\u0438 \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u043d\u0438\u043a\u0430\u043a \u043d\u0435 \u043f\u043e\u043f\u0430\u0434\u0430\u0435\u0442.\" \/>\n\t\t<meta property=\"og:url\" content=\"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/monitorim-sportmaster-kak-i-chem\" \/>\n\t\t<meta property=\"og:image\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:secure_url\" content=\"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg\" \/>\n\t\t<meta property=\"og:image:width\" content=\"350\" \/>\n\t\t<meta property=\"og:image:height\" content=\"350\" \/>\n\t\t<meta property=\"article:published_time\" content=\"2020-09-06T05:42:57+00:00\" \/>\n\t\t<meta property=\"article:modified_time\" content=\"2020-09-06T05:42:57+00:00\" \/>\n\t\t<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<meta property=\"article:author\" content=\"https:\/\/www.facebook.com\/prohoster\" \/>\n\t\t<!-- All in One SEO -->\n\n","aioseo_head_json":{"title":"\ud83e\udd47Nadziremo Sportmaster \u2014 kako i \u010dime | ProHoster","description":"O stvaranju sustava nadzora razmi\u0161ljali smo u fazi formiranja produktnih timova. Postalo je jasno da na\u0161e poslovanje \u2014 operacija \u2014 nikako ne ulazi u te timove.","canonical_url":"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/monitorim-sportmaster-kak-i-chem","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"hr_HR","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043c \u0421\u043f\u043e\u0440\u0442\u043c\u0430\u0441\u0442\u0435\u0440 \u2014 \u043a\u0430\u043a \u0438 \u0447\u0435\u043c | ProHoster","og:description":"\u041e \u0441\u043e\u0437\u0434\u0430\u043d\u0438\u0438 \u0441\u0438\u0441\u0442\u0435\u043c\u044b \u043c\u043e\u043d\u0438\u0442\u043e\u0440\u0438\u043d\u0433\u0430 \u043c\u044b \u0437\u0430\u0434\u0443\u043c\u0430\u043b\u0438\u0441\u044c \u043d\u0430 \u044d\u0442\u0430\u043f\u0435 \u0444\u043e\u0440\u043c\u0438\u0440\u043e\u0432\u0430\u043d\u0438\u044f \u043f\u0440\u043e\u0434\u0443\u043a\u0442\u043e\u0432\u044b\u0445 \u043a\u043e\u043c\u0430\u043d\u0434. \u0421\u0442\u0430\u043b\u043e \u043f\u043e\u043d\u044f\u0442\u043d\u043e, \u0447\u0442\u043e \u043d\u0430\u0448\u0435 \u0434\u0435\u043b\u043e \u2014 \u044d\u043a\u0441\u043f\u043b\u0443\u0430\u0442\u0430\u0446\u0438\u044f \u2014 \u0432 \u044d\u0442\u0438 \u043a\u043e\u043c\u0430\u043d\u0434\u044b \u043d\u0438\u043a\u0430\u043a \u043d\u0435 \u043f\u043e\u043f\u0430\u0434\u0430\u0435\u0442.","og:url":"https:\/\/prohoster.info\/hr\/blog\/administrirovanie\/monitorim-sportmaster-kak-i-chem","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2020-09-06T05:42:57+00:00","article:modified_time":"2020-09-06T05:42:57+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"93358","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 11:49:43","updated":"2026-02-09 16:45:36","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/posts\/93358","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/comments?post=93358"}],"version-history":[{"count":1,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/posts\/93358\/revisions"}],"predecessor-version":[{"id":158514,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/posts\/93358\/revisions\/158514"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/media\/93359"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/media?parent=93358"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/categories?post=93358"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/hr\/wp-json\/wp\/v2\/tags?post=93358"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}