איך מרכזי נתונים מצילים את החגים

במהלך השנה, הרוסים יוצאים באופן קבוע לחופשות - חופשות ראש השנה, חופשות מאי וסופי שבוע קצרים יותר. וזה הזמן המסורתי למרתונים סדרתיים, רכישות ספונטניות ומכירות ב-Steam. במהלך התקופה שלפני החגים, חברות הקמעונאות והלוגיסטיקה נמצאות בלחץ מוגבר: אנשים מזמינים מתנות מחנויות מקוונות, משלמים עבור המשלוח שלהן, קונים כרטיסים לטיולים ומתקשרים. שיאי הביקוש ליומן הם גם מבחן מאמץ טוב לבתי קולנוע מקוונים, פורטלים למשחקים, אירוח וידאו ושירותי סטרימינג של מוזיקה - כולם עובדים עד הקצה שלהם במהלך החגים.

אנו אגיד לך כיצד להבטיח זמינות רציפה של תוכן באמצעות הדוגמה של הקולנוע המקוון Okko, המסתמך על הכוח של מרכז הנתונים Linxdatacenter.

בעבר, בתגובה לעליות עונתיות בצריכה, נרכש ציוד נוסף לפריסה מקומית ו"עם מילואים". עם זאת, כשהגיע "זמן H", התברר לעתים קרובות שחברות לא יכלו או לא הספיקו להתמודד עם התצורה הנכונה של שרתים ומערכות אחסון בעצמן. פשוט לא ניתן היה לפתור את הבעיות הללו ככל שהתפתחו מצבי חירום. לאחר זמן מה הגיעה ההבנה: שיאים בביקוש לתוכן ולשירותים מקוונים מטופלים בצורה מושלמת בעזרת משאבים של צד שלישי, אותם ניתן לרכוש במודל של תשלום לפי נסיעה - תשלום עבור הנפח הנצרך בפועל.

כיום, כמעט כל החברות שצופים זינוק בביקוש למשאביהן במהלך החגים (מה שנקרא פרץ) מזמינות מראש הרחבת קיבולת ערוצי התקשורת. אותן חברות שפורסות אפליקציות ומסדי נתונים על משאבי דאטה סנטר מגדילות את כוח המחשוב בעננים במהלך שיאי החגים, ובנוסף מזמינות את המכונות הוירטואליות הנדרשות, קיבולת האחסון וכו' ממרכזי הנתונים.  

איך לא לפספס את המטרה בחישובים

כדי להתכונן לעומסי שיא חשובה עבודה מתואמת בין הספק ללקוח. הנקודות העיקריות בעבודה זו כוללות תחזית מדויקת של עליית עומס מבחינת תזמון ונפח, תכנון קפדני ואיכות אינטראקציה עם עמיתים בתוך מרכז הנתונים, וכן עם צוות מומחי IT בצד ספק התוכן.

מספר פתרונות עוזרים לארגן את ההקצאה המהירה של המשאבים הדרושים כדי להבטיח שהפרק החדש של סדרת הטלוויזיה האהובה עליך לא יקפא על מסך הטאבלט שלך.
 

• ראשית, מדובר באיזוני עומסי עבודה: אלו פתרונות תוכנה המנטרים בקפידה את רמת העומס של השרתים, מערכות האחסון והרשתות, ומאפשרים לייעל את פעולת כל מערכת למשימה העומדת על הפרק. מאזנים מעריכים את רמת הזמינות של חומרה ומכונות וירטואליות כאחד, מונעים את הקרבה של ביצועי המערכת מצד אחד, ומונעים מהתשתית "להתחמם יתר על המידה" ולהאט, מצד שני. כך נשמרת רמה מסוימת של משאבי מילואים, שניתן להעביר במהירות לפתרון בעיות דחופות (קפיצה חדה בבקשות לפורטל עם תוכן וידאו, עלייה בהזמנות למוצר מסוים וכו').
• שנית, CDN. טכנולוגיה זו מאפשרת למשתמשים לקבל תוכן מהפורטל ללא חציצה של עיכובים על ידי גישה אליו מהנקודה הגיאוגרפית הקרובה למשתמש. בנוסף, CDN מבטל את ההשפעה המזיקה על תהליכי העברת תעבורה הנגרמת על ידי עומס בערוצים, הפסקות חיבור, אובדן מנות בצמתי ערוצים וכו'.

אוקו רואה הכל

בואו נסתכל על דוגמה של בית הקולנוע המקוון Okko שמתכונן לחגים, באמצעות האתרים שלנו במוסקבה ובסנט פטרסבורג.

לדברי אלכסיי גולובב, המנהל הטכני של Okko, בחברה, בנוסף לחגים בלוח השנה (עונת השיא), ישנן תקופות שבהן יוצאות לאקרנים סרטים גדולים מהחברות הגדולות:

"בכל שנה בתקופת החגים, נפח התנועה של עוקו מוכפל בערך בהשוואה לשנה הקודמת. אז, אם בעונת השנה החדשה שעברה עומס השיא המרבי היה 80 Gbit/s, אז ב-2018/19 ציפינו ל-160 - העלייה הכפולה המסורתית. עם זאת, קיבלנו יותר מ-200 Gbit/s!"

אוקו תמיד מתכוננת לעומס שיא באיטיות, לאורך כל השנה, כחלק מפרויקט בשם הקוד "שנה חדשה". בעבר, Okko השתמשה בתשתית משלה; לחברה יש אשכול אספקת תוכן משלה, בחומרה משלה ועם תוכנה משלה. במהלך השנה, המומחים הטכניים של Okko רכשו בהדרגה שרתים חדשים והגדילו את התפוקה של האשכול שלהם, תוך ציפייה להכפלה של הצמיחה השנתית. בנוסף, חוברו קישורים ומפעילים חדשים - בנוסף לשחקנים גדולים כמו Rostelecom, Megafon ו-MTS, חוברו גם נקודות חילופי תעבורה והמפעילים הקטנים ביותר. גישה זו אפשרה לספק את השירות למספר המרבי של לקוחות באמצעות המסלול הקצר ביותר.

בשנה שעברה, לאחר שניתחה את עלות הציוד, עלויות העבודה להרחבה והשוואה לעלות השימוש ב-CDN של צד שלישי, אוקו הבינה שהגיע הזמן לנסות מודל הפצה היברידי. בעקבות הגידול הכפול במהלך חגי השנה החדשה, יש ירידה בתנועה, ופברואר היא העונה הנמוכה ביותר. ומסתבר שהציוד שלך בטל בזמן הזה. עד הקיץ, הירידה מתפזרת, ועד עונת הסתיו מתחילה עלייה חדשה. לכן, לקראת 2019 החדשה, Okko נקטה במסלול אחר: הם שינו את התוכנה שלהם כדי להיות מסוגלים להפיץ את העומס לא רק על עצמם, אלא גם על CDNs (Content Delivery Network) חיצוניים. חוברו שני CDNs כאלה, שלתוכם "מוזגה" עודף תעבורה. רוחב הפס הפנימי של תשתית ה-IT של Okko היה מוכן לעמוד באותה צמיחה כפולה, אבל במקרה שהייתה חריגה של משאבים, הוכנו CDNs של שותפים.

"ההחלטה שלא להרחיב את ה-CDN שלה חסכה לאוקו כ-20% מתקציב ההפצה שלה ב-CAPEX. בנוסף, החברה חסכה מספר חודשי אדם בכך שהעבירה את עבודת התקנת הציוד על כתפי השותף". - מעיר אלכסיי גולובב.

אשכול ההפצה (CDN פנימי) באוקו מיושם בשני אתרי Linxdatacenter במוסקבה ובסנט פטרסבורג. שיקוף מלא הן של התוכן והן של המטמון שלו (הפצת צמתים) מסופקת. בהתאם לכך, מרכז הנתונים של מוסקבה מעבד את מוסקבה וכמה אזורים ברוסיה, ומרכז הנתונים של סנט פטרסבורג מעבד את צפון-מערב ושאר חלקי המדינה. האיזון מתרחש לא רק על בסיס אזורי, אלא גם בהתאם לעומס על הצמתים במרכז נתונים מסוים; נוכחות הסרט במטמון ומספר גורמים נוספים נלקחים גם בחשבון.

ארכיטקטורת השירות המוגדלת נראית כך בתרשים:

מבחינה פיזית, תמיכת שירות ופיתוח מוצרים מורכבת מכעשרה מתלים בסנט פטרסבורג וממספר מתלים במוסקבה. ישנם כמה עשרות שרתים לווירטואליזציה וכמעט מאתיים שרתי "חומרה" לכל השאר - הפצה, תמיכת שירות ותשתית המשרד עצמו. האינטראקציה של ספק התוכן עם מרכז הנתונים בתקופות עומס שיא אינה שונה מהעבודה הנוכחית. כל תקשורת מוגבלת לפנייה לשירות התמיכה, ובמקרה חירום בטלפון.

כיום, אנו קרובים יותר מאי פעם לתרחיש של 100% צריכת תוכן מקוונת ללא הפרעות, שכן כל הטכנולוגיות הנחוצות לכך כבר זמינות. הפיתוח של סטרימינג מקוון מתרחש מהר מאוד. הפופולריות של מודלים משפטיים של צריכת תוכן הולכת וגדלה: משתמשים רוסים מתחילים להתרגל בהדרגה לעובדה שהם צריכים לשלם עבור תוכן. יתרה מכך, לא רק לקולנוע, אלא גם למוזיקה, ספרים וחומרים חינוכיים באינטרנט. ובעניין זה, אספקת התכנים המגוונים ביותר ועם עיכובי הרשת הנמוכים ביותר הוא הקריטריון החשוב ביותר בתפעול השירותים המקוונים. והמשימה שלנו, כנותני שירות, היא לענות על צורכי משאבים בזמן ובעתודות.

מקור: www.habr.com