{"id":90281,"date":"2020-07-30T13:42:14","date_gmt":"2020-07-30T11:42:14","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/kak-uma-tech-infrastrukturu-razvivala"},"modified":"2020-07-30T13:42:14","modified_gmt":"2020-07-30T11:42:14","slug":"kak-uma-tech-infrastrukturu-razvivala","status":"publish","type":"post","link":"https:\/\/prohoster.info\/da\/blog\/administrirovanie\/kak-uma-tech-infrastrukturu-razvivala","title":{"rendered":"Hvordan Uma.Tech udviklede sin infrastruktur","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Vi lancerede nye tjenester, trafikken voksede, vi udskiftede servere, tilf\u00f8jede nye steder og ombyggede datacentre \u2013 og nu vil vi fort\u00e6lle denne historie, som vi f\u00f8rste gang pr\u00e6senterede for jer for fem \u00e5r siden.<\/i>.<\/a><\/noindex><\/p>\n

Fem \u00e5r er et typisk tidsrum til at opsummere og vurdere fremskridt. Derfor har vi besluttet at fort\u00e6lle om udviklingen af vores infrastruktur, som har gennemg\u00e5et en utrolig sp\u00e6ndende rejse i l\u00f8bet af de fem \u00e5r, vi er stolte af. De kvantitative \u00e6ndringer, vi har gennemf\u00f8rt, er blevet til kvalitative, og nu kan infrastrukturen fungere i tilstande, som for et \u00e5rti siden syntes som science fiction. <\/p>\n

Vi sikrer driften af komplekse projekter med strenge krav til p\u00e5lidelighed og belastninger, herunder PREMIER og Match TV. Under sportsudsendelser og ved premiere p\u00e5 popul\u00e6re serier kr\u00e6ves der trafikoverf\u00f8rsel i terabits\/s, hvilket vi nemt kan h\u00e5ndtere, s\u00e5 ofte at arbejde med s\u00e5danne hastigheder l\u00e6nge har v\u00e6ret en del af vores hverdag. For fem \u00e5r siden var det tungeste projekt, der arbejdede p\u00e5 vores systemer, Rutube, som siden da har udviklet sig, \u00f8get sine volumener og trafik, hvilket skulle tages i betragtning ved planl\u00e6gningen af belastninger.<\/p>\n

Vi har fortalt om, hvordan vi udviklede 'hardwaren' i vores infrastruktur (\u2018Rutube 2009-2015: historien om vores hardware\u2019<\/a><\/noindex>) og udviklede systemet ansvarlig for videooverf\u00f8rsel (\u2018Fra nul til 700 gigabit i sekundet \u2014 hvordan en af de st\u00f8rste videohosting-tjenester i Rusland overf\u00f8rer video\u2019<\/a><\/noindex>), men siden skriveperioden for disse tekster er der g\u00e5et meget tid, og mange andre l\u00f8sninger er blevet skabt og implementeret, hvis resultater g\u00f8r os i stand til at opfylde moderne krav og v\u00e6re tilstr\u00e6kkeligt fleksible til at tilpasse os nye opgaver.<\/p>\n

\"Hvordan
\n
\nKernenettet<\/b> udvikler vi konstant. Vi gik over til Cisco-udstyr i 2015, som vi ogs\u00e5 n\u00e6vnte i den tidligere artikel. Dengang var det de samme 10\/40G, men af \u00e5benlyse grunde har vi allerede efter et par \u00e5r opgraderet de eksisterende chassiser, og nu bruger vi ogs\u00e5 25\/100G aktivt. <\/p>\n

\"Hvordan
\n
\n100G-forbindelser er l\u00e6nge ikke l\u00e6ngere en luksus (snarere er det et presserende krav i vores segment), og de er heller ikke en sj\u00e6ldenhed (flere og flere operat\u00f8rer tilbyder tilslutning med s\u00e5danne hastigheder). Dog forbliver 10\/40G relevant: gennem disse forbindelser forts\u00e6tter vi med at tilslutte operat\u00f8rer med et lille trafikvolumen, hvor det i \u00f8jeblikket ikke er hensigtsm\u00e6ssigt at bruge en mere kapacitetsdrivende port.<\/p>\n

Det netv\u00e6rkskerne, vi har skabt, fortjener en s\u00e6rskilt overvejelse og vil senere blive emnet for en separat artikel. Her vil vi dykke ned i de tekniske detaljer og overveje logikken bag vores handlinger under opbygningen. Men nu forts\u00e6tter vi med at skitsere infrastrukturen mere skematisk, da jeres opm\u00e6rksomhed, k\u00e6re l\u00e6sere, ikke er ubegribelig.<\/p>\n

Video udleveringsservere <\/b>evolverer hurtigt, for hvilket vi tilbyder en del indsats. Tidligere brugte vi prim\u00e6rt 2U-servere med 4-5 netv\u00e6rkskort, hver med to 10G-porte, men nu leveres st\u00f8rstedelen af trafikken fra 1U-servere, hvor 2-3 kort hver har to 25G-porte. Priserne p\u00e5 10G- og 25G-kort er n\u00e6sten blevet lige, og hurtigere l\u00f8sninger g\u00f8r det muligt at levere b\u00e5de 10G og 25G. Resultatet er en klar besparelse: f\u00e6rre serverkomponenter og kabler til tilslutning \u2013 lavere omkostninger (og h\u00f8jere p\u00e5lidelighed), komponenter optager mindre plads i racken \u2013 hvilket muligg\u00f8r placering af flere servere pr. pladsenhed og dermed lavere lejeomkostninger.<\/p>\n

Men vigtigere er gevinsten i hastighed! Nu kan vi med 1U levere mere end 100G! Og dette i en situation, hvor nogle store russiske projekter betegner en udlevering p\u00e5 40G med 2U som en 'bedrift'. Vi ville \u00f8nske, det var vores problemer!<\/p>\n

\"Hvordan
\n
\nLad os bem\u00e6rke, at generationen af netv\u00e6rkskort, der kun kan arbejde p\u00e5 10G, stadig er i brug. Dette udstyr fungerer stabilt og er os velkendt, s\u00e5 vi har ikke smidt det v\u00e6k, men fundet en ny anvendelse for det. Disse komponenter har vi installeret i videoopbevaringsservere, som for effektiv drift \u00e5benlyst klart ikke kan n\u00f8jes med \u00e9n to 1G-gr\u00e6nseflader, her viste 10G-kort sig at v\u00e6re relevante.<\/p>\n

Datablagringssystemer<\/b> De ogs\u00e5 vokser. I l\u00f8bet af de seneste fem \u00e5r er de g\u00e5et fra at have tolv diskpladser (12x HDD 2U) til at have seksogtredive diskpladser (36x HDD 4U). Nogle er bange for at bruge s\u00e5 store chassis, da et enkelt fejl kan true hele systemets ydeevne \u2013 eller endda dets funktionsdygtighed! \u2013 Men hos os vil det ikke ske: vi har sikret os redundans med geodistribuerede data kopier. Vi har fordelt chassis i forskellige datacentre \u2013 vi bruger i alt tre \u2013 og dette forhindrer problemer b\u00e5de ved fejl i chassis og ved nedbrud p\u00e5 site.<\/p>\n

\"Hvordan
\n
\nSelvf\u00f8lgelig har denne tilgang gjort hardware RAID overfl\u00f8dig, og vi har derfor droppet det. Ved at fjerne redundans har vi samtidig \u00f8get systemets p\u00e5lidelighed, forenklet l\u00f8sningen og fjernet et af de potentielle fejlpunkter. Lad os minde om, at vores storage-systemer er \"h\u00e5ndlavede\". Dette valg tog vi helt bevidst, og resultatet har fuldt ud tilfredsstillet os.<\/p>\n

Datacentre<\/b> i l\u00f8bet af de sidste fem \u00e5r har vi skiftet flere gange. Siden skrivningen af den tidligere artikel har vi kun ikke \u00e6ndret \u00e9t datacenter \u2013 DataLine \u2013 de andre har kr\u00e6vet udskiftning i takt med udviklingen af vores infrastruktur. Alle flytninger mellem sites har v\u00e6ret planlagte.<\/p>\n

For to \u00e5r siden migrerede vi indenfor MMTS-9 og flyttede til en site med kvalitetsembel\u00e6gning, god k\u00f8lesystem, stabil str\u00f8mforsyning og uden den st\u00f8v, der tidligere l\u00e5 i tykke lag p\u00e5 alle overflader og ogs\u00e5 fyldte vores udstyr. Valget af kvalitet i ydelser \u2013 og frav\u00e6ret af st\u00f8v! \u2013 var \u00e5rsagen til vores flytning.<\/p>\n

\"Hvordan
\n
\nN\u00e6sten altid \"g\u00e6lder en flytning som to brande\", men problemerne under migrationen er hver gang forskellige. Denne gang blev den st\u00f8rste udfordring ved flytningen inden for et datacenter \"leveret\" af de optiske krydsforbindelser \u2013 deres overflod p\u00e5 tv\u00e6rs af etagerne uden at blive samlet i en f\u00e6lles krydsforbindelse fra teleselskaberne. Processen med at opdatere og omdirigere krydsforbindelserne (hvor ingeni\u00f8rerne fra MMTS-9 hjalp os) var nok det sv\u00e6reste trin i migrationen.<\/p>\n

Den anden migration fandt sted for et \u00e5r siden, i 2019, da vi flyttede fra et mindre godt datacenter til O2xygen. \u00c5rsagerne til flytningen var lignende dem, der er n\u00e6vnt ovenfor, men der kom ogs\u00e5 et problem med den manglende attraktivitet af det oprindelige datacenter for teleselskaber \u2013 mange udbydere m\u00e5tte vi \"indlejre\" til dette punkt selv.<\/p>\n

\"Hvordan
\n
\nMigrationen af 13 racks til en kvalitetslokation i MMTS-9 gjorde det muligt at udvikle denne lokation ikke kun som operat\u00f8r (par tre racks og \"bypass\" til operat\u00f8rer), men ogs\u00e5 at anvende den som en af de prim\u00e6re. Dette har gjort migrationen fra et mindre godt datacenter lidt lettere \u2013 det meste af udstyret derfra blev vi flyttet til en anden lokation, og O2xygen fik rollen som den voksende, da vi ogs\u00e5 sendte 5 racks med udstyr derhen.<\/p>\n

I dag er O2xygen allerede en fuldgyldig lokation, hvor de n\u00f8dvendige operat\u00f8rer \"er kommet\" til og forts\u00e6tter med at tilslutte sig. For operat\u00f8rerne har O2xygen ogs\u00e5 vist sig at v\u00e6re attraktiv med hensyn til strategisk udvikling.<\/p>\n

Hovedfasen af flytningen gennemf\u00f8rer vi bestemt p\u00e5 en nat, og ved migrationen inden for MMTS-9 og til O2xygen overholdt vi denne regel. Vi understreger, at regelen om \"flytning p\u00e5 en nat\" strengt overholdes uanset antallet af racks! Der var endda et tilf\u00e6lde, hvor vi flyttede 20 racks og ogs\u00e5 fik det gjort p\u00e5 en nat. Migrationen er en forholdsvis ukompliceret proces, der kr\u00e6ver omhu og r\u00e6kkef\u00f8lge, men der er ogs\u00e5 nogle tricks b\u00e5de i forberedelsesprocessen, ved flytningen og ved implementeringen p\u00e5 den nye lokation. Vi er klar til at fort\u00e6lle mere detaljeret om migrationen, hvis du er interesseret.<\/p>\n

Resultater<\/b> Vi kan godt lide fem\u00e5rsplaner. Vi har afsluttet opbygningen af en ny fejltolerant infrastruktur, fordelt over tre datacentre. Vi har markant \u00f8get trafikkens t\u00e6thed \u2013 hvis vi for nylig var glade for 40-80G med 2U, er det nu normalt for os at levere 100G med 1U. Nu opfattes en terabit trafik som hverdagskost for os. Vi er klar til at forts\u00e6tte med at udvikle vores infrastruktur, som er blevet fleksibel og skalerbar.<\/p>\n

Sp\u00f8rgsm\u00e5l: <\/b>Hvad skal vi fort\u00e6lle dig i de kommende tekster, k\u00e6re l\u00e6sere? Om hvorfor vi begyndte at lave vores egne datalagringssystemer? Om netv\u00e6rkskerner og deres egenskaber? Om tricks og nuancer ved migration mellem datacentre? Om optimering af l\u00f8sninger gennem valg af komponenter og finjustering af parametre? Om oprettelse af robuste l\u00f8sninger takket v\u00e6re multipel redundans og horisontale skaleringsmuligheder inden for datacentret, der er implementeret i strukturen af tre datacentre?<\/p>\n

Forfatter: Peter Vinogradov \u2013 Teknisk direkt\u00f8r hos Uma.Tech Hamstere<\/a><\/noindex> <\/i>
\n
Kilde: habr.com<\/a> <\/p>","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"excerpt":{"rendered":"

\u041c\u044b \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u043b\u0438 \u043d\u043e\u0432\u044b\u0435 \u0441\u0435\u0440\u0432\u0438\u0441\u044b, \u0442\u0440\u0430\u0444\u0438\u043a \u0440\u043e\u0441, \u0437\u0430\u043c\u0435\u043d\u044f\u043b\u0438 \u0441\u0435\u0440\u0432\u0435\u0440\u0430, \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0430\u043b\u0438 \u043d\u043e\u0432\u044b\u0435 \u043f\u043b\u043e\u0449\u0430\u0434\u043a\u0438 \u0438 \u043f\u0435\u0440\u0435\u0434\u0435\u043b\u044b\u0432\u0430\u043b\u0438 \u0426\u041e\u0414\u044b \u2013 \u0430 \u0441\u0435\u0439\u0447\u0430\u0441 \u0440\u0430\u0441\u0441\u043a\u0430\u0436\u0435\u043c \u044d\u0442\u0443 \u0438\u0441\u0442\u043e\u0440\u0438\u044e, \u0441 \u043d\u0430\u0447\u0430\u043b\u043e\u043c \u043a\u043e\u0442\u043e\u0440\u043e\u0439 \u0437\u043d\u0430\u043a\u043e\u043c\u0438\u043b\u0438 \u0432\u0430\u0441 \u043f\u044f\u0442\u044c \u043b\u0435\u0442 \u043d\u0430\u0437\u0430\u0434. \u041f\u044f\u0442\u044c \u043b\u0435\u0442 \u2013 \u0445\u0430\u0440\u0430\u043a\u0442\u0435\u0440\u043d\u043e\u0435 \u0432\u0440\u0435\u043c\u044f \u0434\u043b\u044f \u043f\u043e\u0434\u0432\u0435\u0434\u0435\u043d\u0438\u044f \u043f\u0440\u043e\u043c\u0435\u0436\u0443\u0442\u043e\u0447\u043d\u044b\u0445 \u0438\u0442\u043e\u0433\u043e\u0432. \u041f\u043e\u044d\u0442\u043e\u043c\u0443 \u043c\u044b \u0440\u0435\u0448\u0438\u043b\u0438 \u0440\u0430\u0441\u0441\u043a\u0430\u0437\u0430\u0442\u044c \u043e \u0440\u0430\u0437\u0432\u0438\u0442\u0438\u0438 \u043d\u0430\u0448\u0435\u0439 \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u044b, \u043a\u043e\u0442\u043e\u0440\u0430\u044f \u0437\u0430 \u043f\u044f\u0442\u0438\u043b\u0435\u0442\u043a\u0443 \u043f\u0440\u043e\u0448\u043b\u0430 \u0443\u0434\u0438\u0432\u0438\u0442\u0435\u043b\u044c\u043d\u043e \u0438\u043d\u0442\u0435\u0440\u0435\u0441\u043d\u044b\u0439 \u043f\u0443\u0442\u044c \u0440\u0430\u0437\u0432\u0438\u0442\u0438\u044f, \u043a\u043e\u0442\u043e\u0440\u044b\u043c \u043c\u044b […]<\/p>\n","protected":false,"gt_translate_keys":[{"key":"rendered","format":"html"}]},"author":1,"featured_media":90282,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[688],"tags":[],"class_list":["post-90281","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-administrirovanie"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\n","aioseo_head_json":{"title":"\ud83e\udd47Hvordan Uma.Tech forbedrede infrastrukturen | ProHoster","description":"Vi lancerede nye tjenester, trafikken voksede, vi udskiftede serverne, tilsluttede nye faciliteter og genopbyggede datacentre \u2013 og nu vil vi fort\u00e6lle denne historie, som vi f\u00f8rste gang introducerede for fem \u00e5r siden.","canonical_url":"https:\/\/prohoster.info\/da\/blog\/administrirovanie\/kak-uma-tech-infrastrukturu-razvivala","robots":"max-image-preview:large","keywords":"","webmasterTools":{"miscellaneous":""},"schema":null,"og:locale":"da_DK","og:site_name":"ProHoster | \u041a\u0443\u043f\u0438\u0442\u044c \u043d\u0430\u0434\u0435\u0436\u043d\u044b\u0439 \u0445\u043e\u0441\u0442\u0438\u043d\u0433 \u0434\u043b\u044f \u0441\u0430\u0439\u0442\u043e\u0432 \u0441 \u0437\u0430\u0449\u0438\u0442\u043e\u0439 \u043e\u0442 DDoS, VPS VDS \u0441\u0435\u0440\u0432\u0435\u0440\u044b","og:type":"article","og:title":"\ud83e\udd47\u041a\u0430\u043a Uma.Tech \u0438\u043d\u0444\u0440\u0430\u0441\u0442\u0440\u0443\u043a\u0442\u0443\u0440\u0443 \u0440\u0430\u0437\u0432\u0438\u0432\u0430\u043b\u0430 | ProHoster","og:description":"\u041c\u044b \u0437\u0430\u043f\u0443\u0441\u043a\u0430\u043b\u0438 \u043d\u043e\u0432\u044b\u0435 \u0441\u0435\u0440\u0432\u0438\u0441\u044b, \u0442\u0440\u0430\u0444\u0438\u043a \u0440\u043e\u0441, \u0437\u0430\u043c\u0435\u043d\u044f\u043b\u0438 \u0441\u0435\u0440\u0432\u0435\u0440\u0430, \u043f\u043e\u0434\u043a\u043b\u044e\u0447\u0430\u043b\u0438 \u043d\u043e\u0432\u044b\u0435 \u043f\u043b\u043e\u0449\u0430\u0434\u043a\u0438 \u0438 \u043f\u0435\u0440\u0435\u0434\u0435\u043b\u044b\u0432\u0430\u043b\u0438 \u0426\u041e\u0414\u044b \u2013 \u0430 \u0441\u0435\u0439\u0447\u0430\u0441 \u0440\u0430\u0441\u0441\u043a\u0430\u0436\u0435\u043c \u044d\u0442\u0443 \u0438\u0441\u0442\u043e\u0440\u0438\u044e, \u0441 \u043d\u0430\u0447\u0430\u043b\u043e\u043c \u043a\u043e\u0442\u043e\u0440\u043e\u0439 \u0437\u043d\u0430\u043a\u043e\u043c\u0438\u043b\u0438 \u0432\u0430\u0441 \u043f\u044f\u0442\u044c \u043b\u0435\u0442 \u043d\u0430\u0437\u0430\u0434.","og:url":"https:\/\/prohoster.info\/da\/blog\/administrirovanie\/kak-uma-tech-infrastrukturu-razvivala","og:image":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:secure_url":"https:\/\/prohoster.info\/wp-content\/uploads\/2021\/11\/logo-350.jpg","og:image:width":350,"og:image:height":350,"article:published_time":"2020-07-30T11:42:14+00:00","article:modified_time":"2020-07-30T11:42:14+00:00","article:publisher":"https:\/\/www.facebook.com\/prohoster","article:author":"https:\/\/www.facebook.com\/prohoster"},"aioseo_meta_data":{"post_id":"90281","title":null,"description":null,"keywords":null,"keyphrases":null,"primary_term":null,"canonical_url":null,"og_title":null,"og_description":null,"og_object_type":"default","og_image_type":"default","og_image_url":null,"og_image_width":null,"og_image_height":null,"og_image_custom_url":null,"og_image_custom_fields":null,"og_video":null,"og_custom_url":null,"og_article_section":null,"og_article_tags":null,"twitter_use_og":false,"twitter_card":"default","twitter_image_type":"default","twitter_image_url":null,"twitter_image_custom_url":null,"twitter_image_custom_fields":null,"twitter_title":null,"twitter_description":null,"schema":{"blockGraphs":[],"customGraphs":[],"default":{"data":{"Article":[],"Course":[],"Dataset":[],"FAQPage":[],"Movie":[],"Person":[],"Product":[],"ProductReview":[],"Car":[],"Recipe":[],"Service":[],"SoftwareApplication":[],"WebPage":[]},"graphName":"","isEnabled":true},"graphs":[]},"schema_type":null,"schema_type_options":null,"pillar_content":false,"robots_default":true,"robots_noindex":false,"robots_noarchive":false,"robots_nosnippet":false,"robots_nofollow":false,"robots_noimageindex":false,"robots_noodp":false,"robots_notranslate":false,"robots_max_snippet":null,"robots_max_videopreview":null,"robots_max_imagepreview":"large","priority":null,"frequency":null,"local_seo":null,"seo_analyzer_scan_date":null,"breadcrumb_settings":null,"limit_modified_date":false,"reviewed_by":null,"ai":null,"created":"2021-02-28 12:54:27","updated":"2022-09-30 02:23:08","focus_keyword":null,"additional_keywords":null,"truseo_locale":null},"gt_translate_keys":[{"key":"link","format":"url"}],"_links":{"self":[{"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/posts\/90281","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/comments?post=90281"}],"version-history":[{"count":0,"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/posts\/90281\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/media\/90282"}],"wp:attachment":[{"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/media?parent=90281"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/categories?post=90281"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/prohoster.info\/da\/wp-json\/wp\/v2\/tags?post=90281"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}