{"id":56260,"date":"2020-02-08T00:00:00","date_gmt":"2020-02-07T21:00:00","guid":{"rendered":"https:\/\/prohoster.info\/blog\/blog_prohoster\/slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com"},"modified":"2020-02-18T14:04:30","modified_gmt":"2020-02-18T11:04:30","slug":"slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com","status":"publish","type":"post","link":"https:\/\/prohoster.info\/de\/blog\/administrirovanie\/slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com","title":{"rendered":"SRE Slurm. Ein durchgehendes Experiment mit Experten von Booking.com und Google.com","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Unser Team liebt Experimente. Jeder Sl\u00f6rm ist kein statisches Wiederholen des Vorherigen, sondern eine Reflexion der Erfahrungen und ein \u00dcbergang von Gut zu Besserem. Aber mit dem SRE Sl\u00f6rm<\/a><\/noindex> haben wir uns entschieden, ein v\u00f6llig neues Format anzuwenden \u2013 den Teilnehmern Bedingungen zu geben, die so nah wie m\u00f6glich an \"echten\" sind. <\/p>\n

<\/p>\n

Kurz gesagt, woran wir w\u00e4hrend des Intensivkurses gearbeitet haben: \"Wir bauen, zerlegen, reparieren,
\nlernen\". SRE hat kaum Wert in reiner Theorie \u2013 nur die Praxis, reale L\u00f6sungen und echte Probleme z\u00e4hlen. <\/p>\n

<\/p>\n

Die Teilnehmer wurden in Teams eingeteilt, damit der lebhafte Wettbewerbsgeist niemanden einschlafen oder \"Angry Birds\" auf dem iPhone spielen l\u00e4sst, wie es Dmitri Anatolyevich machte. <\/p>\n

<\/p>\n

Vier Mentoren sorgten f\u00fcr Probleme, Bugs und Aufgaben. Ivan Kruglov, Principal Developer bei Booking.com (Niederlande). Ben Tyler, Principal Developer bei Booking.com (USA). Eduard Medvedev, CTO bei Tungsten Labs (Deutschland). Jewgeni Varavva, Allround-Entwickler bei Google (San Francisco).<\/p>\n

<\/p>\n

Au\u00dferdem sind die Teilnehmer in Teams eingeteilt \u2013 und konkurrieren miteinander. Interessant? <\/p>\n

<\/p>\n

\"SRE
\nIvan, Ben, Eduard und Jewgeni blicken mit freundlich-leninistischem Schmunzeln auf die armen Teilnehmer des SRE Sl\u00f6rm vor Beginn des Wettbewerbs.<\/em><\/p>\n

<\/p>\n

<\/a><\/noindex>Also die Aufgabe: <\/p>\n

<\/p>\n

\u041c\u044b \u043d\u0430\u0448, \u043c\u044b \u043d\u043e\u0432\u044b\u0439 \u043c\u0438\u0440 \u043f\u043e\u0441\u0442\u0440\u043e\u0438\u043c…<\/strong><\/p>\n

<\/p>\n

Es gibt eine Aggregator-Website f\u00fcr Kinotickets. Die Vorf\u00e4lle werden von Mentoren in einem zuvor durchdachten Szenario entworfen (obwohl niemand eine besonders raffinierte und heimt\u00fcckische Improvisation ausschlie\u00dft); die Funktionsf\u00e4higkeit der Website wird durch verschiedene Metriken beschrieben. Die Probleme k\u00f6nnen vielf\u00e4ltig sein: Tickets f\u00fcr das Theater 'Moulin Rouge' laden sich nicht in die Datenbank; Film- und Theaterplakate ben\u00f6tigen mehr als 10 Sekunden zum Laden; die Beschreibung eines einzelnen Films bleibt h\u00e4ngen; 0,1 % der Bestellungen landen auf bereits reservierten Pl\u00e4tzen; gelegentlich f\u00e4llt das Zahlungssystem f\u00fcr ein bis zwei Minuten aus. Und vieles, vieles mehr, was einem Teilnehmer des SRE Slurm bei seiner tats\u00e4chlichen Arbeit widerfahren kann. <\/p>\n

<\/p>\n

\"SRE
\nWir sind bereit, alles\u2026 und jeden zu bew\u00e4ltigen.<\/em><\/p>\n

<\/p>\n

Unsere vielschichtige Website besteht aus mehreren Mikrodiensten. Ihre Aufgabe ist die Aggregation von Daten zu Vorf\u00fchrungen, Preisen und Verf\u00fcgbarkeit von Kinos. Sie zeigt Filmank\u00fcndigungen an und erm\u00f6glicht die Auswahl von Kino, Vorstellung, Saal und Platz sowie die Buchung und Bezahlung von Tickets. Insgesamt bietet sie alles, wovon ein Zuschauer nur tr\u00e4umen kann. Doch der Benutzer ahnt nicht, welcher titaneske Kampf um die Stabilit\u00e4t und Verf\u00fcgbarkeit der Website im Hintergrund stattfindet. <\/p>\n

<\/p>\n

F\u00fcr die Website im intensiven Einsatz haben wir SLO-, SLI- und SLA-Kennzahlen festgelegt, die Architektur und Infrastruktur entwickelt, die Seite implementiert sowie Monitoring und Alerting eingerichtet. Und es ging los. <\/p>\n

\nSLO, SLI, SLA<\/b><\/p>\n

SLI \u2014 Service Level Indicators. SLO \u2014 Service Level Objectives. SLA \u2014 Service Level Agreements. <\/p>\n

SLA ist ein Begriff aus der ITIL-Methodologie und bezeichnet einen formalen Vertrag zwischen dem Dienstnutzer und dem Dienstanbieter, der die Dienstleistung, die Rechte und Pflichten der Parteien sowie, das Wichtigste, den vereinbarten Qualit\u00e4tsstandard f\u00fcr die Bereitstellung dieser Dienstleistung enth\u00e4lt.<\/p>\n

SLO \u2014 das ist die Servicelevel-Objective: ein angestrebter Wert oder ein Wertebereich f\u00fcr den Servicelevel, der durch SLI gemessen wird. Der Normalwert f\u00fcr SLO ist \u00abSLI \u2264 Zielwert\u00bb oder \u00abuntere Grenze \u2264 SLI \u2264 obere Grenze\u00bb. <\/p>\n

SLI ist ein Servicelevel-Indicator \u2014 eine sorgf\u00e4ltig definierte quantitative Messung eines Aspekts des bereitgestellten Servicelevels. F\u00fcr die meisten Dienste wird die Anfrageverz\u00f6gerung als key SLI betrachtet \u2014 die Zeit, die ben\u00f6tigt wird, um eine Antwort auf eine Anfrage zur\u00fcckzugeben. Weitere g\u00e4ngige SLIs sind die Fehlerrate, oft ausgedr\u00fcckt als Anteil aller eingegangenen Anfragen, und die Systemdurchsatzrate, die normalerweise in Anfragen pro Sekunde gemessen wird.<\/p><\/blockquote>\n

<\/p>\n

\u041f\u0435\u0440\u0432\u044b\u043c \u0434\u0435\u043b\u043e\u043c \u043c\u044b \u0441\u043b\u043e\u043c\u0430\u0435\u043c \u0441\u0430\u043c\u043e\u043b\u0451\u0442\u044b, \u043d\u0443 \u0430 \u0434\u0435\u0432\u0443\u0448\u0435\u043a, \u0430 \u0434\u0435\u0432\u0443\u0448\u0435\u043a \u043f\u043e\u0442\u043e\u043c…<\/strong><\/p>\n

<\/p>\n

Innere und \u00e4u\u00dfere Faktoren begannen schon in den ersten Minuten, das SLO zu \u201ebeeintr\u00e4chtigen\u201c. Alles fiel den Administratoren auf den Kopf \u2014 sowohl Programmierfehler als auch Infrastrukturfehler, ein Ansturm von Besuchern und DDoS-Angriffe. Alles, was das SLO verschlechtert. <\/p>\n

<\/p>\n

\"SRE
\n\u201e- Liebe Teilnehmer, ich freue mich, euch mitteilen zu k\u00f6nnen, dass zuerst alles f\u00e4llt\u2026 alles!\u201c<\/em><\/p>\n

<\/p>\n

Im Verlauf der Diskussion behandelten die Referenten Aspekte wie Robustheit, Fehlerbudget, Testpraktiken, Unterbrechungsmanagement und Betriebslast.<\/p>\n

<\/p>\n

\u041d\u0435 \u043a\u043e\u0447\u0435\u0433\u0430\u0440\u044b \u043c\u044b, \u043d\u0435 \u043f\u043b\u043e\u0442\u043d\u0438\u043a\u0438…<\/strong><\/p>\n

<\/p>\n

Hier begannen die Teilnehmer zu reparieren \u2013 das Wichtigste ist, den ersten Schritt zu verstehen. <\/p>\n

<\/p>\n

\"SRE
\n\u201eOh Gott, ich habe noch nie gesehen, dass das so kaputtgeht, in dieser Form und Haltung!\u201c<\/em><\/p>\n

<\/p>\n

Also, ein Vorfall ist geschehen. Der Zahlungsdienst ist ausgefallen. Wie geht man vor, um die Funktionsf\u00e4higkeit in k\u00fcrzester Zeit wiederherzustellen?<\/p>\n

<\/p>\n

\"SRE
\nDie Experten werfen einen liebevollen Blick auf die Teilnehmer und bereiten eine weitere Herausforderung vor.<\/em><\/p>\n

<\/p>\n

Jedes Team organisiert die Arbeit der Gruppe zur Behebung des Vorfalls \u2013 Kollegen werden eingebunden und die Stakeholder informiert. Gleichzeitig werden Priorit\u00e4ten festgelegt. So trainierten die Teilnehmer, unter Druck und in extrem begrenztem Zeitrahmen zu arbeiten.<\/p>\n

<\/p>\n

\"SRE
\n\u201eWas ist das f\u00fcr ein schrecklicher Anblick?!\u201c<\/em><\/p>\n

<\/p>\n

Durchatmen\u2026 und das \u00dcbung beendet.<\/strong><\/p>\n

<\/p>\n

Gemeinsam mit den Sprechern hat das Team nach jeder gel\u00f6sten Problematik und tempor\u00e4r stabilisierten Website die Vorf\u00e4lle aus der Perspektive des SRE untersucht. Es wurden die Probleme im Detail analysiert \u2014 Ursachen, Abl\u00e4ufe der Behebung. Danach haben sowohl im Team als auch kollektiv Entscheidungen zur weiteren Vermeidung getroffen: wie man das Monitoring verbessert, die Architektur sinnvoll ver\u00e4ndert, den Ansatz zur Entwicklung und Betrieb korrigiert und die Richtlinien anpasst. Die Sprecher haben die Praxis der Nachbesprechung demonstriert. <\/p>\n

<\/p>\n

\"SRE
\n\u201e- Wer m\u00f6chte noch leiden! \u2014 Ich!\u201c<\/em><\/p>\n

<\/p>\n

Auf der elektronischen Anzeigetafel wurden die Erfolge der Teams streng und pr\u00e4zise festgehalten. <\/p>\n

<\/p>\n

\"SRE<\/p>\n

<\/p>\n

F\u00fcr die ersten Pl\u00e4tze \u2014 eine Belohnung von den Stakeholdern.<\/p>\n

<\/p>\n

\"SRE<\/p>\n

Quelle: habr.com<\/a><\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u041d\u0430\u0448\u0430 \u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u043b\u044e\u0431\u0438\u0442 \u044d\u043a\u0441\u043f\u0435\u0440\u0438\u043c\u0435\u043d\u0442\u044b. \u041a\u0430\u0436\u0434\u044b\u0439 \u0421\u043b\u0451\u0440\u043c \u2014 \u044d\u0442\u043e \u043d\u0435 \u0441\u0442\u0430\u0442\u0438\u0447\u043d\u043e\u0435 \u043f\u043e\u0432\u0442\u043e\u0440\u0435\u043d\u0438\u0435 \u043f\u0440\u0435\u0434\u044b\u0434\u0443\u0449\u0438\u0445, \u0430 \u043e\u0441\u043c\u044b\u0441\u043b\u0435\u043d\u0438\u0435 \u043e\u043f\u044b\u0442\u0430 \u0438 \u043f\u0435\u0440\u0435\u0445\u043e\u0434 \u043e\u0442 \u0445\u043e\u0440\u043e\u0448\u0435\u0433\u043e \u043a \u043b\u0443\u0447\u0448\u0435\u043c\u0443. \u041d\u043e \u0441\u043e \u0421\u043b\u0451\u0440\u043c\u043e\u043c SRE \u043c\u044b \u0440\u0435\u0448\u0438\u043b\u0438 \u043f\u0440\u0438\u043c\u0435\u043d\u0438\u0442\u044c \u0430\u0431\u0441\u043e\u043b\u044e\u0442\u043d\u043e \u043d\u043e\u0432\u044b\u0439 \u0444\u043e\u0440\u043c\u0430\u0442 \u2014 \u0434\u0430\u0442\u044c \u0443\u0447\u0430\u0441\u0442\u043d\u0438\u043a\u0430\u043c \u0443\u0441\u043b\u043e\u0432\u0438\u044f, \u043c\u0430\u043a\u0441\u0438\u043c\u0430\u043b\u044c\u043d\u043e \u043f\u0440\u0438\u0431\u043b\u0438\u0436\u0451\u043d\u043d\u044b\u0435 \u043a \u00ab\u0431\u043e\u0435\u0432\u044b\u043c\u00bb. \u0415\u0441\u043b\u0438 \u043a\u0440\u0430\u0442\u043a\u043e \u043e\u0431\u0440\u0438\u0441\u043e\u0432\u0430\u0442\u044c, \u0447\u0435\u043c \u043c\u044b \u0437\u0430\u043d\u0438\u043c\u0430\u043b\u0438\u0441\u044c \u043d\u0430 \u0438\u043d\u0442\u0435\u043d\u0441\u0438\u0432\u0435: \u00ab\u0421\u0442\u0440\u043e\u0438\u043c, \u043b\u043e\u043c\u0430\u0435\u043c, \u0447\u0438\u043d\u0438\u043c, \u0438\u0437\u0443\u0447\u0430\u0435\u043c\u00bb. SRE \u043c\u0430\u043b\u043e \u0447\u0435\u0433\u043e \u0441\u0442\u043e\u0438\u0442 […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-56260","post","type-post","status-publish","format-standard","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47S\u00f6rm SRE. Ein durchgehendes Experiment mit Experten von Booking.com und Google.com | ProHoster","description":"Unser Team liebt Experimente. Jeder Sl\u00f6rm ist keine statische Wiederholung der vorherigen, sondern ein Verst\u00e4ndnis der Erfahrungen und der \u00dcbergang von gut zu besser. Aber beim SRE Sl\u00f6rm haben wir uns entschieden, ein v\u00f6llig neues Format anzuwenden \u2013 den Teilnehmern Bedingungen zu geben, die den 'Einsatzbedingungen' so nahe wie m\u00f6glich kommen. Kurz gesagt, was wir beim Intensivkurs gemacht haben: \u201eBauen, Zerlegen, Reparieren, Lernen\u201c. SRE hat kaum einen Wert.","canonical_url":"https:\/\/prohoster.info\/de\/blog\/administrirovanie\/slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"de_DE","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u0421\u043b\u0451\u0440\u043c SRE. \u0421\u043f\u043b\u043e\u0448\u043d\u043e\u0439 \u044d\u043a\u0441\u043f\u0435\u0440\u0438\u043c\u0435\u043d\u0442 c \u044d\u043a\u0441\u043f\u0435\u0440\u0442\u0430\u043c\u0438 \u0438\u0437 Booking.com \u0438 Google.com | ProHoster","og:description":"\u041d\u0430\u0448\u0430 \u043a\u043e\u043c\u0430\u043d\u0434\u0430 \u043b\u044e\u0431\u0438\u0442 \u044d\u043a\u0441\u043f\u0435\u0440\u0438\u043c\u0435\u043d\u0442\u044b. \u041a\u0430\u0436\u0434\u044b\u0439 \u0421\u043b\u0451\u0440\u043c \u2014 \u044d\u0442\u043e \u043d\u0435 \u0441\u0442\u0430\u0442\u0438\u0447\u043d\u043e\u0435 \u043f\u043e\u0432\u0442\u043e\u0440\u0435\u043d\u0438\u0435 \u043f\u0440\u0435\u0434\u044b\u0434\u0443\u0449\u0438\u0445, \u0430 \u043e\u0441\u043c\u044b\u0441\u043b\u0435\u043d\u0438\u0435 \u043e\u043f\u044b\u0442\u0430 \u0438 \u043f\u0435\u0440\u0435\u0445\u043e\u0434 \u043e\u0442 \u0445\u043e\u0440\u043e\u0448\u0435\u0433\u043e \u043a \u043b\u0443\u0447\u0448\u0435\u043c\u0443. \u041d\u043e \u0441\u043e \u0421\u043b\u0451\u0440\u043c\u043e\u043c SRE \u043c\u044b \u0440\u0435\u0448\u0438\u043b\u0438 \u043f\u0440\u0438\u043c\u0435\u043d\u0438\u0442\u044c \u0430\u0431\u0441\u043e\u043b\u044e\u0442\u043d\u043e \u043d\u043e\u0432\u044b\u0439 \u0444\u043e\u0440\u043c\u0430\u0442 \u2014 \u0434\u0430\u0442\u044c \u0443\u0447\u0430\u0441\u0442\u043d\u0438\u043a\u0430\u043c \u0443\u0441\u043b\u043e\u0432\u0438\u044f, \u043c\u0430\u043a\u0441\u0438\u043c\u0430\u043b\u044c\u043d\u043e \u043f\u0440\u0438\u0431\u043b\u0438\u0436\u0451\u043d\u043d\u044b\u0435 \u043a \u00ab\u0431\u043e\u0435\u0432\u044b\u043c\u00bb. \u0415\u0441\u043b\u0438 \u043a\u0440\u0430\u0442\u043a\u043e \u043e\u0431\u0440\u0438\u0441\u043e\u0432\u0430\u0442\u044c, \u0447\u0435\u043c \u043c\u044b \u0437\u0430\u043d\u0438\u043c\u0430\u043b\u0438\u0441\u044c \u043d\u0430 \u0438\u043d\u0442\u0435\u043d\u0441\u0438\u0432\u0435: \u00ab\u0421\u0442\u0440\u043e\u0438\u043c, \u043b\u043e\u043c\u0430\u0435\u043c, \u0447\u0438\u043d\u0438\u043c, \u0438\u0437\u0443\u0447\u0430\u0435\u043c\u00bb. SRE \u043c\u0430\u043b\u043e \u0447\u0435\u0433\u043e \u0441\u0442\u043e\u0438\u0442","og:url":"https:\/\/prohoster.info\/de\/blog\/administrirovanie\/slyorm-sre-sploshnoj-eksperiment-c-ekspertami-iz-booking-com-i-google-com","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2020-02-07T21:00:00+00:00","article:modified_time":"2020-02-18T11:04:30+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"56260","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 19:28:23","updated":"2022-09-29 15:08:36"},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/56260","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/comments?post=56260"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/posts\/56260\/revisions"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/media?parent=56260"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/categories?post=56260"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/de\/wp-json\/wp\/v2\/tags?post=56260"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}