{"id":56260,"date":"2020-02-08T00:00:00","date_gmt":"2020-02-07T21:00:00","guid":{"rendered":"https:\/\/prohoster.info\/blog\/blog_prohoster\/slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com"},"modified":"2020-02-18T14:04:30","modified_gmt":"2020-02-18T11:04:30","slug":"slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com","status":"publish","type":"post","link":"https:\/\/prohoster.info\/nl\/blog\/administrirovanie\/slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com","title":{"rendered":"Slurm SRE. Een experiment met experts van Booking.com en Google.com","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Ons team houdt van experimenteren. Elke SRE is geen statische herhaling van de vorige, maar een reflectie van ervaring en een overgang van goed naar beter. Maar met SRE<\/a><\/noindex> hebben we een totaal nieuw formaat toegepast \u2014 deelnemers krijgen omstandigheden die zo dicht mogelijk bij de 'echte' liggen. <\/p>\n

<\/p>\n

Kort samengevat, wat we deden tijdens de intensieve training: 'Bouwen, breken, repareren,
\nbestuderen'. SRE heeft weinig waarde in blote theorie \u2014 alleen praktijk, echte oplossingen, echte problemen. <\/p>\n

<\/p>\n

De deelnemers werden verdeeld in teams, zodat de levendige competitieve geest niemand liet indutten of 'Angry Birds' op de iPhone speelde, zoals Dmitry Anatolievich deed. <\/p>\n

<\/p>\n

Problemen, glitches, bugs en taken werden verzorgd door vier mentoren. Ivan Kruglov, Principal Developer bij Booking.com (Nederland). Ben Tyler, Principal Developer bij Booking.com (VS). Eduard Medvedev, CTO bij Tungsten Labs (Duitsland). Evgeny Varavva, breed profiel ontwikkelaar bij Google (San Francisco).<\/p>\n

<\/p>\n

En bovendien waren de deelnemers verdeeld in teams \u2014 en strijden ze tegen elkaar. Interessant? <\/p>\n

<\/p>\n

\"Slurm
\nIvan, Ben, Eduard en Evgeny kijken met een vriendelijke, bijna leninistische blik naar de arme deelnemers van SRE voor de start van de competitie.<\/em><\/p>\n

<\/p>\n

<\/a><\/noindex>Dus de taak: <\/p>\n

<\/p>\n

Wij zullen onze nieuwe wereld opbouwen\u2026<\/strong><\/p>\n

<\/p>\n

Er is een ticketaggregatorwebsite voor films. De incidenten worden verzonnen door de mentoren volgens een vooraf uitgewerkt scenario (hoewel niemand een verfijnde en sluwe improvisatie uitsluit), de functionaliteit van de website wordt beschreven met verschillende statistieken. De problemen kunnen erg uiteenlopend zijn: tickets voor het theater 'Moulin Rouge' worden niet in de database geladen; film- en theaterposters worden meer dan 10 seconden later in de database geladen; de beschrijving van een specifieke film loopt vast; 0,1% van de bestellingen komt op al gereserveerde plaatsen terecht; periodiek valt het betalingssysteem een minuut of twee uit. En nog veel meer nare dingen die op een deelnemer van SRE kunnen neerkomen in zijn werk. <\/p>\n

<\/p>\n

\"Slurm
\nWij zijn klaar om met alles\u2026 en iedereen om te gaan.<\/em><\/p>\n

<\/p>\n

Onze doorlopende website bestaat uit verschillende microservices. De taak ervan is het aggregeren van gegevens over vertoningen, prijzen en beschikbare plaatsen van alle bioscopen. Het toont filmaanbiedingen, laat je de bioscoop, vertoning, zaal en plaats kiezen, en boeken en betalen voor tickets. Kortom, alles waar een kijker alleen maar van kan dromen. Maar de gebruiker heeft geen idee van de titanenstrijd voor de stabiliteit en beschikbaarheid van de site die zich binnenin afspeelt. <\/p>\n

<\/p>\n

Voor de site tijdens de intensieve periode hebben we SLO-, SLI- en SLA-parameters gedefinieerd, architectuur en infrastructuur ontwikkeld, de site gedeployed, monitoring en alarmering ingesteld. En daar gingen we. <\/p>\n

\nSLO, SLI, SLA<\/b><\/p>\n

SLI zijn prestatieniveau-indicatoren. SLO zijn prestatieniveau-doelstellingen. SLA zijn Service Level Agreements. <\/p>\n

SLA is een term uit de ITIL-methodologie en verwijst naar een formele overeenkomst tussen de klant van de dienst en de leverancier, die een beschrijving van de dienst, de rechten en plichten van de partijen, en, het belangrijkste, het overeengekomen kwaliteitsniveau van de geleverde dienst bevat.<\/p>\n

SLO is de prestatiedoelstelling: een streefwaarde of bereik van waarden voor het prestatieniveau, gemeten door SLI. Een normale waarde voor SLO is \"SLI \u2264 streefwaarde\" of \"ondergrens \u2264 SLI \u2264 bovengrens\". <\/p>\n

SLI is een prestatieniveau-indicator \u2014 een zorgvuldig gedefinieerde kwantitatieve maat voor een van de aspecten van de geleverde dienst. Voor de meeste services wordt de responsetijd als belangrijkste SLI beschouwd \u2014 de tijd die nodig is om een antwoord op een verzoek te retourneren. Andere veelvoorkomende SLI's zijn foutfrequentie, vaak uitgedrukt als het percentage van alle ontvangen verzoeken, en de doorvoersnelheid van het systeem, meestal gemeten in verzoeken per seconde.<\/p><\/blockquote>\n

<\/p>\n

Als eerste breken we de vliegtuigen, en de meisjes, de meisjes komen later\u2026<\/strong><\/p>\n

<\/p>\n

Interne en externe factoren begonnen vanaf de eerste minuten het SLO te \"bederven\". Alles viel op de schouders van de beheerders \u2014 zowel ontwikkelaarsfouten, infrastructurele storingen, een toestroom van bezoekers, als DDoS-aanvallen. Alles wat het SLO verslechtert. <\/p>\n

<\/p>\n

\"Slurm
\n\"- Beste deelnemers, ik ben blij jullie te kunnen vertellen dat jullie als eerste\u2026 alles zal instorten!\"<\/em><\/p>\n

<\/p>\n

Onderweg bespraken de sprekers veerkracht, error budget, testpraktijken, het beheer van onderbrekingen en operationele belasting.<\/p>\n

<\/p>\n

We zijn geen stoker, geen timmerman\u2026<\/strong><\/p>\n

<\/p>\n

Hier begonnen de deelnemers met repareren - het belangrijkste is om te begrijpen waarmee we als eerste moeten beginnen. <\/p>\n

<\/p>\n

\"Slurm
\n- Mijn God, ik heb nog nooit gezien dat dit zo kapot ging, in deze staat en in deze houding!<\/em><\/p>\n

<\/p>\n

Er is een storing opgetreden. De betaalverwerkingsdienst is uitgevallen. Hoe kunnen we zo snel mogelijk weer operationeel zijn?<\/p>\n

<\/p>\n

\"Slurm
\nDe experts kijken vriendelijk naar de deelnemers en bereiden een nieuwe uitdaging voor.<\/em><\/p>\n

<\/p>\n

Elke team organiseert het werk van de groep die de storing verhelpt - zij schakelen collega's in en informeren de belanghebbenden. Tevens worden prioriteiten vastgesteld. Zo zijn de deelnemers getraind om onder druk te werken in situaties van extreem beperkte tijd.<\/p>\n

<\/p>\n

\"Slurm
\n- Wat is dat voor een angstaanjagend iets?!<\/em><\/p>\n

<\/p>\n

Haalden adem... en voltooiden de oefening.<\/strong><\/p>\n

<\/p>\n

Samen met de sprekers bestudeerden de teams na elke opgelost probleem en tijdelijk gestabiliseerde website de incidenten vanuit het perspectief van SRE. Ze analyseerden de problemen gedetailleerd - de oorzaken van optreden, de voortgang van de oplossing. Daarna namen ze, zowel per team als collectief, een beslissing over hoe deze verder te voorkomen: hoe de monitoring te verbeteren, hoe de architectuur goed aan te passen, hoe de benadering van ontwikkeling en exploitatie te corrigeren, en hoe de reglementen te verbeteren. De sprekers demonstreerden de praktijk van post-mortem. <\/p>\n

<\/p>\n

\"Slurm
\n- Wie wil er nog meer lijden! - Ik!<\/em><\/p>\n

<\/p>\n

De successen van de teams werden strikt en duidelijk op het elektronische bord genoteerd. <\/p>\n

<\/p>\n

\"Slurm<\/p>\n

<\/p>\n

Voor de eerste plaatsen - een prijs van de belanghebbenden.<\/p>\n

<\/p>\n

\"Slurm<\/p>\n

Bron: habr.com<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u041d\u0430\u0448\u0430 \u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u043b\u044e\u0431\u0438\u0442 \u044d\u043a\u0441\u043f\u0435\u0440\u0438\u043c\u0435\u043d\u0442\u044b. \u041a\u0430\u0436\u0434\u044b\u0439 \u0421\u043b\u0451\u0440\u043c \u2014 \u044d\u0442\u043e \u043d\u0435 \u0441\u0442\u0430\u0442\u0438\u0447\u043d\u043e\u0435 \u043f\u043e\u0432\u0442\u043e\u0440\u0435\u043d\u0438\u0435 \u043f\u0440\u0435\u0434\u044b\u0434\u0443\u0449\u0438\u0445, \u0430 \u043e\u0441\u043c\u044b\u0441\u043b\u0435\u043d\u0438\u0435 \u043e\u043f\u044b\u0442\u0430 \u0438 \u043f\u0435\u0440\u0435\u0445\u043e\u0434 \u043e\u0442 \u0445\u043e\u0440\u043e\u0448\u0435\u0433\u043e \u043a \u043b\u0443\u0447\u0448\u0435\u043c\u0443. \u041d\u043e \u0441\u043e \u0421\u043b\u0451\u0440\u043c\u043e\u043c SRE \u043c\u044b \u0440\u0435\u0448\u0438\u043b\u0438 \u043f\u0440\u0438\u043c\u0435\u043d\u0438\u0442\u044c \u0430\u0431\u0441\u043e\u043b\u044e\u0442\u043d\u043e \u043d\u043e\u0432\u044b\u0439 \u0444\u043e\u0440\u043c\u0430\u0442 \u2014 \u0434\u0430\u0442\u044c \u0443\u0447\u0430\u0441\u0442\u043d\u0438\u043a\u0430\u043c \u0443\u0441\u043b\u043e\u0432\u0438\u044f, \u043c\u0430\u043a\u0441\u0438\u043c\u0430\u043b\u044c\u043d\u043e \u043f\u0440\u0438\u0431\u043b\u0438\u0436\u0451\u043d\u043d\u044b\u0435 \u043a \u00ab\u0431\u043e\u0435\u0432\u044b\u043c\u00bb. \u0415\u0441\u043b\u0438 \u043a\u0440\u0430\u0442\u043a\u043e \u043e\u0431\u0440\u0438\u0441\u043e\u0432\u0430\u0442\u044c, \u0447\u0435\u043c \u043c\u044b \u0437\u0430\u043d\u0438\u043c\u0430\u043b\u0438\u0441\u044c \u043d\u0430 \u0438\u043d\u0442\u0435\u043d\u0441\u0438\u0432\u0435: \u00ab\u0421\u0442\u0440\u043e\u0438\u043c, \u043b\u043e\u043c\u0430\u0435\u043c, \u0447\u0438\u043d\u0438\u043c, \u0438\u0437\u0443\u0447\u0430\u0435\u043c\u00bb. SRE \u043c\u0430\u043b\u043e \u0447\u0435\u0433\u043e \u0441\u0442\u043e\u0438\u0442 […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-56260","post","type-post","status-publish","format-standard","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47Sl\u00ebrm SRE. Een doorlopende experiment met experts van Booking.com en Google.com | ProHoster","description":"Ons team houdt van experimenten. Elke Sl\u00ebrm is geen statische herhaling van de voorgaande, maar een reflectie op de ervaringen en een overgang van goed naar beter.","canonical_url":"https:\/\/prohoster.info\/nl\/blog\/administrirovanie\/slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"nl_NL","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u0421\u043b\u0451\u0440\u043c SRE. \u0421\u043f\u043b\u043e\u0448\u043d\u043e\u0439 \u044d\u043a\u0441\u043f\u0435\u0440\u0438\u043c\u0435\u043d\u0442 c \u044d\u043a\u0441\u043f\u0435\u0440\u0442\u0430\u043c\u0438 \u0438\u0437 Booking.com \u0438 Google.com | ProHoster","og:description":"\u041d\u0430\u0448\u0430 \u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u043b\u044e\u0431\u0438\u0442 \u044d\u043a\u0441\u043f\u0435\u0440\u0438\u043c\u0435\u043d\u0442\u044b. \u041a\u0430\u0436\u0434\u044b\u0439 \u0421\u043b\u0451\u0440\u043c \u2014 \u044d\u0442\u043e \u043d\u0435 \u0441\u0442\u0430\u0442\u0438\u0447\u043d\u043e\u0435 \u043f\u043e\u0432\u0442\u043e\u0440\u0435\u043d\u0438\u0435 \u043f\u0440\u0435\u0434\u044b\u0434\u0443\u0449\u0438\u0445, \u0430 \u043e\u0441\u043c\u044b\u0441\u043b\u0435\u043d\u0438\u0435 \u043e\u043f\u044b\u0442\u0430 \u0438 \u043f\u0435\u0440\u0435\u0445\u043e\u0434 \u043e\u0442 \u0445\u043e\u0440\u043e\u0448\u0435\u0433\u043e \u043a \u043b\u0443\u0447\u0448\u0435\u043c\u0443.","og:url":"https:\/\/prohoster.info\/nl\/blog\/administrirovanie\/slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2020-02-07T21:00:00+00:00","article:modified_time":"2020-02-18T11:04:30+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"56260","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 19:28:23","updated":"2022-09-29 15:08:36","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/posts\/56260","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/comments?post=56260"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/posts\/56260\/revisions"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/media?parent=56260"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/categories?post=56260"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/nl\/wp-json\/wp\/v2\/tags?post=56260"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}