מערכת MMS במרכז נתונים: איך ביצענו את ניהול התחזוקה האוטומטי

תארו לעצמכם שיש לכם חדר שרתים מלא של ציוד הנדסי: כמה עשרות מזגנים, חבורה של מערכות גנרטורים של דיזל ואספקת אל-פסק. כדי שהחומרה תעבוד כמו שצריך, אתה בודק את הביצועים שלה באופן קבוע ולא שוכח תחזוקה מונעת: ערוך ריצות מבחן, בדוק את מפלס השמן, החלפת חלקים. גם עבור חדר שרתים אחד צריך לאחסן מידע רב: פנקס ציוד, רשימת חומרים מתכלים במחסן, לוח זמנים של תחזוקה מונעת וכן מסמכי אחריות, חוזים עם ספקים וקבלנים. 

כעת נכפיל את מספר האולמות בעשרה. התעוררו בעיות לוגיסטיות. באיזה מחסן כדאי לאחסן מה כדי שלא תצטרכו לרוץ אחרי כל חלק חילוף? איך לחדש אספקה ​​בזמן כדי שתיקונים לא מתוכננים לא יפתיעו אותך? אם יש הרבה ציוד, אי אפשר להחזיק את כל העבודה הטכנית בראש, וקשה על הנייר. זה המקום שבו MMS, או מערכת ניהול תחזוקה, באה להציל. 

ב-MMS אנו עורכים לוחות זמנים לעבודות מניעה ותיקון ומאחסנים הוראות למהנדסים. לא בכל מרכזי הנתונים יש מערכת כזו; רבים רואים בכך פתרון יקר מדי. אבל מהניסיון שלנו אנחנו משוכנעים בכך זה לא הכלי שחשוב, זו הגישה לעבוד עם מידע. יצרנו את המערכת הראשונה באקסל ופיתחנו אותה בהדרגה למוצר תוכנה. 

עם אלכסדרופ החלטנו לחלוק את הניסיון שלנו בפיתוח MMS משלנו. אני אראה כיצד המערכת התפתחה וכיצד היא עזרה להציג שיטות תחזוקה מומלצות. אלכסיי יספר לכם איך הוא ירש את ה-MMS, מה השתנה בתקופה זו וכיצד המערכת מקלה על החיים למהנדסים כעת. 

איך הגענו ל-MMS משלנו

ראשית היו תיקיות. לפני 8-10 שנים, המידע נשמר בצורה מפוזרת. לאחר התחזוקה, חתמנו ​​על דוחות עבודה שהושלמו, אחסנו מסמכי מקור מנייר בארכיונים וסרקנו עותקים בתיקיות רשת. באותו אופן נאסף מידע על חלקי חילוף: חלקי חילוף, כלי עבודה ואביזרים בתיקיות בחלוקה לפי ציוד. כך תוכל לחיות אם תבנה מבנה ורמות גישה לתיקיות אלו.
אבל אז יש לך שלוש בעיות: 

• ניווט: לוקח הרבה זמן לעבור בין תיקיות שונות. אם תרצו לראות תיקונים בציוד ספציפי לאורך מספר שנים, תצטרכו לבצע הרבה קליקים.
• סטטיסטיקה: לא יהיה לך את זה, ובלעדיו קשה לחזות באיזו מהירות מתקלקל ציוד שונים או כמה חלקי חילוף לתכנן לשנה הבאה.  
• תגובה בזמן: אף אחד לא יזכיר לך שהרכיבים כבר אוזלים וצריך להזמין אותם מחדש. גם לא מובן מאליו שזו לא הפעם הראשונה שאותו ציוד נכשל.  

במשך זמן מה אחסנו מסמכים כאלה, אבל אז גילינו את אקסל :)

MMS לאקסל. עם הזמן, מבנה התיעוד עבר ל-Excel. הוא התבסס על רשימת ציוד, עם לוחות זמנים לתחזוקה, רשימות ביקורת וקישורים לתעודות סיום עבודה המצורפות לו: 

רשימת הציוד ציינה את המאפיינים והמיקום העיקריים במרכז הנתונים:

התוצאה היא מעין נווט שממנו ניתן להבין במהירות מה קורה עם הציוד והתחזוקה שלו. במידת הצורך, תוכל להסתכל על פעולות בודדות מלוח הזמנים של התחזוקה באמצעות הקישורים:

אם אתם מתחזקים מסמך באקסל בצורה מצפונית, הפתרון מתאים למדי לחדר שרתים קטן. אבל זה גם זמני. גם אם נשתמש במזגן אחד ונבצע תחזוקה פעם בחודש, במשך חמש שנים נצבור מאות שגיאות, והאקסל שלנו יתפח. אם אתה מוסיף עוד מזגן, גנרטור דיזל אחד, UPS אחד, אז אתה צריך לעשות כמה יריעות ולקשר אותם יחד. ככל שהסיפור ארוך יותר, כך קשה יותר לתפוס מיד את המידע הדרוש. 

מערכת ה"מבוגרת" הראשונה. בשנת 2014, עברנו ביקורת ניהול ותפעול ראשונה על פי תקני קיימות תפעולית של מכון Uptime. עברנו כמעט את אותה תוכנית אקסל, אבל במהלך שנה שיפרנו אותה מאוד: הוספנו קישורים להוראות ורשימות ביקורת למהנדסים. המבקרים מצאו שהפורמט הזה די ישים. הם הצליחו לעקוב אחר כל הפעולות עם הציוד ודאגו שהמידע מעודכן והתהליכים קיימים. לאחר מכן הביקורת עברה ברעש, וצברה 92 נקודות מתוך 100 אפשריות.

עלתה השאלה: איך לחיות עוד. החלטנו שאנחנו צריכים MMS "רציני", הסתכלנו על כמה תוכנות בתשלום, אבל בסופו של דבר החלטנו לכתוב את התוכנה בעצמנו. אותו אקסל שימש כמפרט טכני מורחב. אלו המשימות שהגדרנו עבור MMS. 

מה שרצינו מ-MMS

ברוב המקרים, MMS הוא קבוצה של ספריות ודוחות. היררכיית הספריות שלנו נראית בערך כך:

ספר העיון הראשון ברמה העליונה הוא רשימת מבנים: חדרי מכונות, מחסנים שבהם נמצא ציוד.

הבא מגיע רשימה של ציוד הנדסי. אספנו אותו לפי המערכות הבאות:

• מערכת מיזוג אוויר: מזגנים, צ'ילרים, משאבות.
• מערכת אספקת חשמל: UPS, מערכות גנרטורים של דיזל, לוחות חלוקה.

עבור כל ציוד אנו אוספים נתונים בסיסיים: סוג, דגם, מספר סידורי, נתוני יצרן, שנת ייצור, תאריך הפעלה, תקופת אחריות.

לאחר שמילאנו את רשימת הציוד, אנו עורכים אותה תוכנית תחזוקה: כיצד ובאיזו תדירות לבצע תחזוקה. בתוכנית התחזוקה אנו מתארים מערך פעולות, למשל: החלף סוללה זו, התאם את פעולתו של חלק מסוים וכן הלאה. אנו מתארים את הפעולות בספר עיון נפרד. אם פעולה חוזרת על עצמה בתוכניות שונות, אז אין צורך לתאר אותה מחדש בכל פעם - אנחנו פשוט לוקחים פעולה מוכנה מתוך ספר העיון:

הפעולות "שינוי הגדרות טמפרטורה" ו"החלפת חיבורי כבלים לשחרור מהיר" יהיו נפוצות עבור צ'ילרים ומערכות מיזוג אוויר של אותו יצרן.

עכשיו עבור כל ציוד שאנחנו יכולים ליצור לוח זמנים לתחזוקה. אנו מקשרים את תוכנית התחזוקה לציוד ספציפי, והמערכת עצמה בוחנת בתוכנית באיזו תדירות יש לבצע תחזוקה, ומחשבת את זמן העבודה מתאריך ההפעלה:
אתה יכול אפילו להפוך את הכנת לוח זמנים כזה לאוטומטי באמצעות נוסחאות אקסל.

סיפור לא לגמרי ברור: אנחנו מנהלים ספרייה נפרדת עבודה נדחית. לוח הזמנים הוא לוח זמנים, אבל כולנו אנשים חיים ואנחנו מבינים שהכל יכול לקרות. לדוגמה, חומר מתכלה לא הגיע בזמן ויש צורך לתזמן את השירות לשבוע. זהו מצב נורמלי אם אתה משגיח עליו. אנו שומרים סטטיסטיקות על עבודות דחויות ועבודות שלא הסתיימו ומנסים להבטיח שביטולי תחזוקה שואפים לאפס.  

סטטיסטיקה נשמרת גם עבור כל ציוד תאונות ותיקונים לא מתוכננים. אנו משתמשים בסטטיסטיקה כדי לתכנן רכישות ולמצוא נקודות תורפה בתשתית. לדוגמה, אם מדחס נשרף באותו מקום שלוש פעמים ברציפות, זהו איתות לחפש את סיבת התקלה.   

היסטוריה זו של תחזוקה ותיקונים הצטברה במשך 4 שנים עבור מזגן ספציפי.

המדריך הבא הוא חלקי חילוף. זה לוקח בחשבון אילו חומרים מתכלים דרושים לציוד, היכן ובאיזו כמות הם מאוחסנים. כאן אנו גם מאחסנים מידע על זמני אספקה ​​על מנת לתכנן טוב יותר הגעה למחסן. 

אנו מחשבים את מספר חלקי החילוף מהסטטיסטיקה השנתית של תיקונים לכל ציוד. עבור כל חלקי החילוף, אנו מציינים את האיזון המינימלי: איזה חלקי חילוף מינימום נדרשים בכל מתקן. אם חלקי החילוף אוזלים, הכמות שלהם בספרייה מודגשת:

האיזון המינימלי של חיישני לחץ גבוה צריך להיות לפחות שניים, אבל נשאר רק אחד. זה הזמן לבצע הזמנה עכשיו. 

ברגע שמגיע משלוח חלקי חילוף, אנו ממלאים את הספרייה בנתוני החשבונית ומציינים את מקום האחסון. אנו רואים מיד את היתרה הנוכחית של חלקי חילוף כאלה במחסן: 

אנו מנהלים ספרייה נפרדת של אנשי קשר. אנו מכניסים לתוכו את נתוני הספקים והקבלנים המבצעים תחזוקה: 

תעודות וקבוצות אישור בטיחות חשמל מצורפות לכרטיס של כל קבלן-מהנדס. בעת עריכת לוח זמנים, נוכל לראות לאילו מומחים יש את האישור הנדרש. 

מאז קיומה של MMS השתנתה העבודה עם היתרי אתר. כך למשל נוספו מסמכים עם הנחיות מתודולוגיות לביצוע תחזוקה. אם בעבר מערכת פעולות השתלבה ברשימת בדיקה קטנה, אז הוראות מפורטות מכסות הכל: כיצד להתכונן, אילו תנאים נדרשים, וכן הלאה.   

הוא יספר לכם איך כל התהליך עובד עכשיו, בעזרת דוגמה. אלכסדרופ. 

איך עובדת תחזוקה ב-MMS?

פעם, עבודה שהסתיימה מזמן תועדה לאחר מעשה. פשוט ביצענו תחזוקה ולאחריה חתמנו ​​על תעודת סיום עבודה. 99% מהשרתים עושים זאת, אבל מניסיון זה לא מספיק. כדי לא לשכוח שום דבר, קודם אנחנו יוצרים אישור עבודה. זהו מסמך המתאר את העבודה ואת התנאים לביצועה. כל תחזוקה ותיקון במערכת שלנו מתחילים בזה. איך זה קורה: 

1. אנו מסתכלים על העבודות המתוכננות הבאות בלוח הזמנים של התחזוקה:
   
2. אנחנו יוצרים אישור חדש. אנו בוחרים קבלן אחזקה שמנהל את התהליך מצידנו ומתאם את העבודה איתנו. אנו מציינים היכן ומתי תתבצע העבודה, בוחרים את סוג הציוד ואת התוכנית שנפעל לפיהן: 
   
3. לאחר שמירת הכרטיס, עברו לפרטים. אנו מציינים את הקבלן ובודקים האם יש לו אישור לבצע את העבודה הנדרשת. אם אין הרשאה, השדה מסומן באדום, ולא ניתן להוציא הזמנת עבודה:  
   
4. אנו מציינים ציוד ספציפי. בהתאם לסוג העבודה נקבעות פעולות מקדימות בתוכנית התחזוקה, למשל: הזמנת דלק לאתר, קביעת תדריך חניכה למהנדסים והודעה לעמיתים. רשימת הפעילויות תופיע אוטומטית, אך נוכל להוסיף פריטים משלנו , הכל די גמיש:
   
5. אנו שומרים את ההזמנה, שולחים מכתב לאדם המאשר ומחכים לתגובתו:
   
6. כאשר המהנדס מגיע, אנו מדפיסים את הזמנת העבודה ישירות מהמערכת.
   
7. הזמנת העבודה מכילה רשימת פעולות עבור תוכנית התחזוקה. מנהל העבודה במרכז הנתונים שולט בתחזוקה ומסמן תיבות.
   

   לזמן מה הספיקה רשימה קצרה. אחר כך הצגנו הוראות מתודולוגיות, או MOP (שיטת הליך). בעזרת מסמך כזה יכול כל מהנדס מוסמך לבדוק כל ציוד. 

   הכל מתואר בפירוט רב ככל האפשר, עד לתבניות של מכתבי התראה ותנאי מזג האוויר: 

   

   המסמך המודפס נראה כך:

   

   לפי תקני Uptime Institute, צריך להיות MOP כזה לכל הפעולות. מדובר בכמות די גדולה של תיעוד. בהתבסס על הניסיון, אנו ממליצים לפתח אותם בהדרגה, למשל, MOP אחד לחודש.

8. לאחר העבודה, המהנדס מנפיק תעודת גמר. אנו סורקים אותו ומצרפים אותו לכרטיס יחד עם סריקות של מסמכים נוספים: היתר ו-MOP. 
   
9. בהזמנת העבודה נציין את העבודה שבוצעה: 
   
10. כרטיס הציוד מכיל את היסטוריית התחזוקה:
    

הראינו איך המערכת שלנו עובדת עכשיו. אבל העבודה על MMS לא הסתיימה: מספר שיפורים כבר מתוכננים. לדוגמה, כעת אנו מאחסנים מידע רב בסריקות. בעתיד, אנו מתכננים להפוך את התחזוקה ללא נייר: לחבר אפליקציה סלולרית שבה המהנדס יכול לסמן את התיבות ולשמור מיד את המידע בכרטיס. 

כמובן, ישנם מוצרים מוכנים רבים בשוק עם פונקציות דומות. אבל רצינו להראות שאפשר לפתח אפילו קובץ אקסל קטן למוצר מלא. אפשר לעשות זאת בעצמכם או לערב קבלנים, העיקר הגישה הנכונה. ואף פעם לא מאוחר מדי להתחיל.

מקור: www.habr.com