როგორ ინახავს მონაცემთა ცენტრები არდადეგებს

მთელი წლის განმავლობაში, რუსები რეგულარულად მიდიან არდადეგებზე - საახალწლო არდადეგებზე, მაისის არდადეგებზე და სხვა მოკლე შაბათ-კვირას. და ეს არის სერიული მარათონების, სპონტანური შესყიდვებისა და გაყიდვების ტრადიციული დრო Steam-ზე. წინასადღესასწაულო პერიოდში საცალო და ლოჯისტიკურ კომპანიებს აქვთ გაზრდილი ზეწოლა: ადამიანები საჩუქრებს უკვეთენ ონლაინ მაღაზიებიდან, იხდიან მიტანის საფასურს, ყიდულობენ ბილეთებს მოგზაურობისთვის და ურთიერთობენ. მოთხოვნის კალენდარული მწვერვალები ასევე კარგი სტრეს ტესტია ონლაინ კინოთეატრებისთვის, სათამაშო პორტალებისთვის, ვიდეო ჰოსტინგისთვის და მუსიკის სტრიმინგის სერვისებისთვის - ისინი ყველა მუშაობენ თავიანთ საზღვრებში არდადეგების დროს.

ჩვენ გეტყვით, თუ როგორ უზრუნველვყოთ შინაარსის უწყვეტი ხელმისაწვდომობა Okko ონლაინ კინოს მაგალითის გამოყენებით, რომელიც ეყრდნობა Linxdatacenter მონაცემთა ცენტრის ძალას.

ადრე, მოხმარების სეზონური მატების საპასუხოდ, დამატებითი აღჭურვილობა შეძენილი იყო ადგილობრივი განლაგებისთვის და „რეზერვით“. ამასთან, როდესაც "დრო H" მოვიდა, ხშირად ირკვევა, რომ კომპანიებს ან არ შეეძლოთ ან არ ჰქონდათ დრო, რომ დამოუკიდებლად გაუმკლავდნენ სერვერების და შენახვის სისტემების სწორ კონფიგურაციას. ამ პრობლემების გადაჭრა უბრალოდ შეუძლებელი იყო, რადგან საგანგებო სიტუაციები განვითარდა. გარკვეული პერიოდის შემდეგ, მოვიდა გაგება: კონტენტზე და ონლაინ სერვისებზე მოთხოვნის მწვერვალები შესანიშნავად იმართება მესამე მხარის რესურსების დახმარებით, რომელთა შეძენაც შესაძლებელია გადახდის მოხმარების მოდელის გამოყენებით - გადახდა მოხმარებული ფაქტობრივი მოცულობისთვის.

დღეს, თითქმის ყველა კომპანია, რომელიც ითვალისწინებს თავის რესურსებზე მოთხოვნის ზრდას არდადეგების დროს (ე.წ. ადიდებული), წინასწარ ბრძანებს საკომუნიკაციო არხის შესაძლებლობების გაფართოებას. ის კომპანიები, რომლებიც განათავსებენ აპლიკაციებსა და მონაცემთა ბაზებს მონაცემთა ცენტრის რესურსებზე, ზრდის გამოთვლით სიმძლავრეს ღრუბლებში არდადეგების პიკების დროს, დამატებით შეუკვეთებენ საჭირო ვირტუალურ მანქანებს, შენახვის მოცულობას და ა.შ. მონაცემთა ცენტრებიდან.  

როგორ არ გამოტოვოთ ნიშანი გამოთვლებში

პიკური დატვირთვისთვის მოსამზადებლად მნიშვნელოვანია კოორდინირებული მუშაობა პროვაიდერსა და კლიენტს შორის. ამ სამუშაოს ძირითადი პუნქტები მოიცავს დატვირთვის ზრდის ზუსტ პროგნოზს დროისა და მოცულობის თვალსაზრისით, ფრთხილად დაგეგმვა და ურთიერთქმედების ხარისხი მონაცემთა ცენტრის კოლეგებთან, ასევე IT სპეციალისტების გუნდთან კონტენტის პროვაიდერის მხარეს.

რიგი გადაწყვეტილებები ხელს უწყობს რესურსების სწრაფი განაწილების ორგანიზებას, რათა უზრუნველყოს თქვენი საყვარელი სერიალის ახალი ეპიზოდი არ გაიყინოს თქვენი ტაბლეტის ეკრანზე.
 

• პირველ რიგში, ეს არის დატვირთვის ბალანსერები: ეს არის პროგრამული გადაწყვეტილებები, რომლებიც ყურადღებით აკვირდებიან სერვერების, შენახვის სისტემების და ქსელების დატვირთვის დონეს, რაც საშუალებას გაძლევთ ოპტიმიზაცია გაუწიოთ თითოეული სისტემის მუშაობას დავალებისთვის. ბალანსისტები აფასებენ როგორც ტექნიკის, ისე ვირტუალური მანქანების ხელმისაწვდომობის დონეს, რაც ხელს უშლის ერთის მხრივ სისტემის მუშაობის მსხვერპლს, ხოლო მეორეს მხრივ, ინფრასტრუქტურის „გახურებას“ და შენელებას. ამ გზით, შენარჩუნებულია სარეზერვო რესურსების გარკვეული დონე, რომელიც შეიძლება სწრაფად გადავიდეს გადაუდებელი პრობლემების გადასაჭრელად (პორტალზე მოთხოვნის მკვეთრი ნახტომი ვიდეო შინაარსით, შეკვეთების ზრდა გარკვეული პროდუქტისთვის და ა.შ.).
• მეორეც, CDN. ეს ტექნოლოგია მომხმარებლებს საშუალებას აძლევს მიიღონ კონტენტი პორტალიდან ბუფერული შეფერხებების გარეშე მასზე წვდომით მომხმარებელთან ყველაზე ახლოს მდებარე გეოგრაფიული წერტილიდან. გარდა ამისა, CDN გამორიცხავს საზიანო ზემოქმედებას ტრაფიკის გადაცემის პროცესებზე, რომლებიც გამოწვეულია არხის გადატვირთულობით, კავშირის შეფერხებით, არხის კვანძებში პაკეტების დანაკარგებით და ა.შ.

ყოვლისმხედველი ოკო

მოდით შევხედოთ Okko ონლაინ კინოთეატრის მაგალითს, რომელიც ემზადება არდადეგებისთვის, ჩვენი საიტების გამოყენებით მოსკოვსა და სანკტ-პეტერბურგში.

Okko-ს ტექნიკური დირექტორის ალექსეი გოლუბევის თქმით, კომპანიაში, გარდა კალენდარული არდადეგებისა (მაღალი სეზონი), არის პერიოდები, როდესაც გამოდის ძირითადი ფილმების რელიზები ძირითადი მაიორებიდან:

„ყოველწლიურად საკურორტო სეზონზე, Okko-ს ტრაფიკის მოცულობა წინა წელთან შედარებით გაორმაგდება. ასე რომ, თუ გასულ საახალწლო სეზონზე მაქსიმალური პიკური დატვირთვა იყო 80 გბიტი/წმ, მაშინ 2018/19 წლებში ველოდით 160 – ტრადიციულ ორმაგ ზრდას. თუმცა, ჩვენ მივიღეთ 200 გბიტ/წმ-ზე მეტი!”

Okko ყოველთვის ემზადება პიკური დატვირთვისთვის ნელა, მთელი წლის განმავლობაში, როგორც პროექტის კოდური სახელწოდებით "ახალი წელი". ადრე Okko იყენებდა საკუთარ ინფრასტრუქტურას; კომპანიას აქვს კონტენტის მიწოდების საკუთარი კლასტერი, საკუთარი აპარატურით და საკუთარი პროგრამული უზრუნველყოფით. წლის განმავლობაში Okko-ს ტექნიკურმა სპეციალისტებმა თანდათან შეიძინეს ახალი სერვერები და გაზარდეს მათი კლასტერის გამტარუნარიანობა, ყოველწლიური ზრდის გაორმაგების მოლოდინში. გარდა ამისა, დაუკავშირდა ახალი ბმულები და ოპერატორები - გარდა დიდი მოთამაშეებისა, როგორიცაა Rostelecom, Megafon და MTS, ასევე იყო დაკავშირებული ტრაფიკის გაცვლის წერტილები და ყველაზე პატარა ოპერატორები. ამ მიდგომამ შესაძლებელი გახადა სერვისის მიწოდება კლიენტების მაქსიმალურ რაოდენობამდე უმოკლესი მარშრუტით.

გასულ წელს, აღჭურვილობის ღირებულების, გაფართოებისთვის შრომის ხარჯების გაანალიზების და მესამე მხარის CDN-ების გამოყენების ხარჯებთან შედარების შემდეგ, Okko მიხვდა, რომ დრო იყო სცადა ჰიბრიდული განაწილების მოდელი. საახალწლო არდადეგებზე ორმაგი ზრდის შემდეგ, ტრაფიკის კლებაა და თებერვალი ყველაზე დაბალი სეზონია. და გამოდის, რომ თქვენი აღჭურვილობა ამ დროს უმოქმედოა. ზაფხულისთვის კლება სრულდება, ხოლო შემოდგომის სეზონისთვის ახალი აწევა იწყება. ამიტომ, ახალი 2019 წლის მოსამზადებლად, Okko-მ სხვა მარშრუტი აიღო: მათ შეცვალეს პროგრამული უზრუნველყოფა, რათა შეეძლოთ დატვირთვის განაწილება არა მხოლოდ საკუთარ თავზე, არამედ გარე CDN-ებზე (კონტენტის მიწოდების ქსელი). ორი ასეთი CDN იყო დაკავშირებული, რომლებშიც ჭარბი ტრაფიკი "გაერთიანდა". Okko-ს IT ინფრასტრუქტურის შიდა გამტარუნარიანობა მზად იყო გაუძლოს იმავე ორმაგ ზრდას, მაგრამ რესურსების გადაჭარბების შემთხვევაში მომზადდა პარტნიორი CDN-ები.

”გადაწყვეტილებამ არ გააფართოვოს მისი CDN დაზოგა Okko-ს განაწილების ბიუჯეტის დაახლოებით 20% CAPEX-ში. გარდა ამისა, კომპანიამ დაზოგა რამდენიმე ადამიანური თვე, ტექნიკის დაყენების სამუშაოს პარტნიორის მხრებზე გადატანით. - კომენტარს აკეთებს ალექსეი გოლუბევი.

სადისტრიბუციო კლასტერი (შიდა CDN) Okko-ში დანერგილია Linxdatacenter-ის ორ საიტზე მოსკოვსა და სანკტ-პეტერბურგში. უზრუნველყოფილია როგორც შინაარსის, ასევე მისი ქეშირების (გამანაწილებელი კვანძების) სრული ასახვა. შესაბამისად, მოსკოვის მონაცემთა ცენტრი ამუშავებს მოსკოვს და რუსეთის რამდენიმე რეგიონს, ხოლო სანქტ-პეტერბურგის მონაცემთა ცენტრი ამუშავებს ჩრდილო-დასავლეთს და დანარჩენ ქვეყანას. დაბალანსება ხდება არა მხოლოდ რეგიონალურ საფუძველზე, არამედ დამოკიდებულია კონკრეტულ მონაცემთა ცენტრში კვანძებზე დატვირთვაზე; ასევე გათვალისწინებულია ფილმის არსებობა ქეშში და მრავალი სხვა ფაქტორი.

გაფართოებული სერვისის არქიტექტურა ასე გამოიყურება დიაგრამაზე:

ფიზიკურად, სერვისისა და პროდუქტის განვითარების მხარდაჭერა შედგება დაახლოებით ათი თაროსგან სანკტ-პეტერბურგში და რამდენიმე თაროსგან მოსკოვში. არსებობს რამდენიმე ათეული სერვერი ვირტუალიზაციისთვის და თითქმის ორასი "ტექნიკური" სერვერი ყველაფრისთვის - დისტრიბუცია, სერვისის მხარდაჭერა და ოფისის საკუთარი ინფრასტრუქტურა. კონტენტის პროვაიდერის ურთიერთქმედება მონაცემთა ცენტრთან პიკური დატვირთვის პერიოდებში არ განსხვავდება მიმდინარე სამუშაოსგან. ყველა კომუნიკაცია შემოიფარგლება დამხმარე სერვისის მოთხოვნით, ხოლო საგანგებო სიტუაციის შემთხვევაში, დარეკვით.

დღეს ჩვენ უფრო ახლოს ვართ, ვიდრე ოდესმე, ჭეშმარიტად 100% უწყვეტი ონლაინ კონტენტის მოხმარების სცენართან, რადგან ამისთვის საჭირო ყველა ტექნოლოგია უკვე ხელმისაწვდომია. ონლაინ სტრიმინგის განვითარება ძალიან სწრაფად ხდება. კონტენტის მოხმარების ლეგალური მოდელების პოპულარობა იზრდება: რუსი მომხმარებლები თანდათან იწყებენ შეგუებას იმ ფაქტთან, რომ მათ უნდა გადაიხადონ კონტენტისთვის. უფრო მეტიც, არა მხოლოდ კინოსთვის, არამედ მუსიკის, წიგნებისა და საგანმანათლებლო მასალებისთვის ინტერნეტში. და ამ მხრივ, ყველაზე მრავალფეროვანი კონტენტის მიწოდება და ქსელის ყველაზე დაბალი შეფერხებებით არის ყველაზე მნიშვნელოვანი კრიტერიუმი ონლაინ სერვისების ფუნქციონირებაში. და ჩვენი, როგორც სერვისის მიმწოდებლის ამოცანაა რესურსების საჭიროებების დროულად და რეზერვებით დაკმაყოფილება.

წყარო: www.habr.com