איך עברתי את מבחן ההסמכה של Google Cloud Professional Data Engineer

ללא שלוש שנות ניסיון מעשי המומלצות

*הערה: המאמר מוקדש לבחינת ההסמכה של Google Cloud Professional Data Engineer, שתקפה עד 29 במרץ 2019. לאחר מכן חלו כמה שינויים - הם מתוארים בסעיף "בנוסף"*

סווטשירט של גוגל: כן. הבעת פנים רצינית: כן. תמונה מגרסת הווידאו של מאמר זה ביוטיוב.

האם אתה רוצה לקבל סווטשירט חדש כמו זה שבתמונה שלי?

או אולי אתה מעוניין בתעודה מהנדס נתונים מקצועי של Google Cloud ואתה מנסה להבין איך להשיג את זה?

במהלך החודשים האחרונים, לקחתי מספר קורסים ובמקביל עבדתי עם Google Cloud כדי להתכונן למבחן Professional Data Engineer. אחר כך הלכתי למבחן ועברתי אותה. הסווטשירט הגיע כמה שבועות לאחר מכן - אבל התעודה הגיעה מהר יותר.

מאמר זה יספק מידע שעשוי להועיל לך ואת הצעדים שעשיתי כדי לקבל הסמכה כמהנדס נתונים מקצועי של Google Cloud.

מועבר ל אלקונוסט

מדוע עליך לקבל את ההסמכה של Google Cloud Professional Data Engineer?

נתונים מקיפים אותנו, הם נמצאים בכל מקום. לכן, יש היום ביקוש למומחים שיודעים ליצור מערכות המסוגלות לעבד ולהשתמש בנתונים. ו-Google Cloud מספק את התשתית לבניית מערכות אלו.

אם כבר יש לך כישורי Google Cloud, כיצד תוכל להפגין אותם למעסיק או ללקוח עתידיים? ניתן לעשות זאת בשתי דרכים: על ידי קיום תיק פרויקטים או על ידי מעבר הסמכה.

תעודה אומרת ללקוחות ומעסיקים פוטנציאליים שיש לך כישורים מסוימים ושתאמצת כדי לקבל אישור רשמי.

כך מצוין גם בתיאור הרשמי של הבחינה.

הפגינו את היכולת שלכם לתכנן ולבנות מערכות מדעיות ומודלים של למידת מכונה בפלטפורמת Google Cloud.

אם עדיין אין לך את המיומנויות, חומרי ההדרכה של ההסמכה ילמדו אותך כל מה שאתה צריך לדעת על איך לבנות מערכות נתונים ברמה עולמית באמצעות Google Cloud.

מי צריך לקבל את ההסמכה של Google Cloud Professional Data Engineer?

ראית את המספרים - מגזר טכנולוגיית הענן גדל, הם איתנו כבר הרבה זמן. אם אתם לא מכירים את הסטטיסטיקה, רק תאמינו לי: העננים במגמת עלייה.

אם אתה כבר מדען נתונים, מהנדס למידת מכונה, או רוצה לעבור לתחום מדעי הנתונים, ההסמכה של Google Cloud Professional Data Engineer היא בדיוק מה שאתה צריך.

היכולת להשתמש בטכנולוגיות ענן הופכת לדרישת חובה עבור כל אנשי מקצוע הנתונים.

האם אתה צריך תעודה כדי להיות מקצוען במדעי נתונים או למידת מכונה?

לא.

אתה יכול להשתמש ב-Google Cloud כדי להפעיל פתרונות נתונים ללא אישור.

תעודה היא רק דרך אחת להוכיח את הכישורים שיש לך.

כמה זה עולה?

עלות הגשת הבחינה היא 200$. אם תיכשל בזה, תצטרך לשלם שוב.

בנוסף, תצטרכו להוציא כסף על מכינות ושימוש בפלטפורמה עצמה.

עלויות הפלטפורמה הן עמלות עבור השימוש בשירותי Google Cloud. אם אתה משתמש פעיל, אתה מודע לכך היטב. אם אתה מתחיל רק מתחיל עם ההדרכות במאמר זה, אתה יכול ליצור חשבון Google Cloud ולעשות הכל תמורת 300 $ זיכוי של Google כשתירשם.

עוד רגע נגיע לעלות הקורסים.

לכמה זמן התעודה תקפה?

שנתיים. לאחר תקופה זו יש לגשת שוב לבחינה.

ומכיוון ש-Google Cloud מתפתח כל הזמן, סביר להניח שדרישות ההסמכה ישתנו (זה קרה בדיוק כשהתחלתי לכתוב את המאמר).

מה צריך להתכונן לבחינה?

לקבלת הסמכה ברמה מקצועית, Google ממליצה על שלוש שנות ניסיון בתעשייה ויותר משנה של ניסיון בפיתוח וניהול פתרונות באמצעות GCP.

לא היה לי שום דבר מזה.

הניסיון הרלוונטי היה כשישה חודשים בכל מקרה.

כדי למלא את החסר, השתמשתי במספר משאבי למידה מקוונים.

אילו קורסים למדתי?

אם המקרה שלך דומה לשלי ואתה לא עומד בדרישות המומלצות, אז אתה יכול לקחת חלק מהקורסים המפורטים למטה כדי לשפר את הרמה שלך.

אלה הם אלה שהשתמשתי בהם כשהתכוננתי להסמכה. הם רשומים לפי סדר ההשלמה.

עבור כל אחד מהם, ציינתי את העלות, התזמון והתועלת למעבר בבחינת ההסמכה.

כמה ממשאבי הלמידה המקוונים המגניבים שבהם השתמשתי כדי לשפר את הכישורים שלי לפני הבחינה, לפי הסדר: גורו ענן, אקדמיית לינוקס, Coursera.

הנדסת נתונים ב-Google Cloud Platform התמחות (Cousera)

עלות: $49 לחודש (לאחר ניסיון חינם של 7 ימים).
זמן: 1-2 חודשים, יותר מ-10 שעות שבועיות.
תוֹעֶלֶת: 8 מתוך 10.

קורס הנדסת נתונים ב-Google Cloud Platform התמחות בפלטפורמת Coursera שפותחה בשיתוף עם Google Cloud.

הוא מחולק לחמישה קורסים מקוננים, שכל אחד מהם הוא כ-10 שעות לימוד שבועיות.

אם אתה חדש ב-Google Cloud Data Science, התמחות זו תעניק לך את הכישורים הדרושים לך. תוכלו להשלים סדרה של תרגילים מעשיים באמצעות פלטפורמה איטרטיבית בשם QwikLabs. לפני כן, יתקיימו הרצאות של מומחי Google Cloud כיצד להשתמש בשירותים שונים, כגון Google BigQuery, Cloud Dataproc, Dataflow ו-Bigtable.

מבוא לענן גורו ל-Google Cloud Platform

עלות: ללא תשלום.
זמן: שבוע, 1-4 שעות.
תוֹעֶלֶת: 4 מתוך 10.

דירוג שימושיות נמוך לא אומר שהקורס בכללותו חסר תועלת - רחוק מכך. הסיבה היחידה שהציון כל כך נמוך היא משום שהוא אינו מתמקד בהסמכת מהנדס נתונים מקצועי (כפי שהשם מרמז).

לקחתי את זה כמרענן לאחר שהשלמתי את ההתמחות ב-Coursera מכיוון שהשתמשתי ב-Google Cloud במקרים מוגבלים.

אם עבדת בעבר עם ספק ענן אחר או שמעולם לא השתמשת ב-Google Cloud, ייתכן שתמצא את הקורס הזה שימושי - זהו מבוא נהדר לפלטפורמת Google Cloud כולה.

מהנדס נתונים מקצועי מוסמך של האקדמיה לינוקס

עלות: $49 לחודש (לאחר ניסיון חינם של 7 ימים).
זמן: 1-4 שבועות, יותר מ-4 שעות שבועיות.
תוֹעֶלֶת: 10 מתוך 10.

לאחר שניגשתי לבחינה והרהר בקורסים שלקחתי, אני יכול לומר שהמהנדס הנתונים המקצועי המוסמך של Google באקדמיה של Linux היה המועיל ביותר.

גם מדריכי וידאו ספר אלקטרוני של קובץ נתונים (משאב למידה חינמי מעולה מסופק עם הקורס) ומבחני תרגול הופכים את זה לאחד הקורסים הטובים ביותר שלקחתי אי פעם.

אפילו המלצתי עליו כחומר עזר בהערות Slack עבור הצוות לאחר הבחינה.

הערות ב-Slack

• חלק משאלות הבחינה לא כוסו בקורס של Linux Academy, A Cloud Guru, או Google Cloud Practice (מה שצפוי).
• בשאלה אחת היה גרף של נקודות נתונים. נשאלה השאלה באיזו משוואה ניתן להשתמש כדי לקבץ אותם (לדוגמה, cos(X) או X²+Y²).
• הקפד להכיר את ההבדלים בין Dataflow, Dataproc, Datastore, Bigtable, BigQuery, Pub/Sub ולהבין כיצד ניתן להשתמש בהם.
• שתי הדוגמאות הספציפיות בבחינה זהות לאלו שבתרגול, אם כי לא קראתי אותן כלל במהלך הבחינה (השאלות עצמן הספיקו כדי לענות).
• הכרת תחביר שאילתות SQL בסיסי שימושי, במיוחד עבור שאלות BigQuery.
• מבחני התרגול בקורסי Linux Academy ו-GCP דומים מאוד בסגנון לשאלות בבחינה - כדאי לקחת אותם מספר פעמים כדי למצוא את החולשות שלך.
• יש לזכור את זה dataproc עובד עם Hadoop, לעורר, כוורת и חזירים.
• זרימת נתונים עובד עם קרן אפאצ'י.
• מפתח ברגים הוא מסד נתונים שתוכנן במקור עבור הענן, הוא תואם ל ACID ועובד בכל מקום בעולם.
• כדאי לדעת את השמות של ה"זקנים" - המקבילות של מסדי נתונים יחסיים ולא יחסיים (לדוגמה, MongoDB, Cassandra).
• תפקידי IAM משתנים מעט בין השירותים, אך מומלץ להבין כיצד להפריד את היכולת של משתמשים לראות נתונים ולעצב זרימות עבודה (לדוגמה, התפקיד Dataflow Worker יכול לעצב זרימות עבודה, אך לא לראות נתונים).
לעת עתה, זה כנראה מספיק. כל בחינה תתקיים אחרת. קורס האקדמיה לינוקס יספק 80% מהידע הדרוש.

סרטונים בני דקה על שירותי Google Cloud

עלות: ללא תשלום.
זמן: 1-2 שעות.
תוֹעֶלֶת: 5 מתוך 10.

סרטונים אלו הומלצו בפורומים של A Cloud Guru. רבים מהם אינם קשורים להסמכת Professional Data Engineer, אז פשוט בחרתי באלה ששמות השירות שלהם נראו לי מוכרים.

כאשר עוברים את הקורס, שירותים מסוימים עשויים להיראות מסובכים, אז היה נחמד לראות כיצד שירות מסוים תואר תוך דקה בלבד.

מתכוננים לבחינת מהנדס נתונים מקצועיים בענן

עלות: $49 לתעודה או בחינם (ללא תעודה).
זמן: 1-2 שבועות, יותר משש שעות שבועיות.
תוֹעֶלֶת: לא מוערך.

מצאתי את המשאב הזה יום לפני מועד הבחינה שלי. לא היה מספיק זמן להשלים אותו - ומכאן חוסר הערכת התועלת.

עם זאת, לאחר עיון בדף סקירת הקורס, אני יכול לומר שזהו משאב נהדר לסקור את כל מה שלמדת על הנדסת נתונים ב-Google Cloud ולמצוא את נקודות התורפה שלך.

סיפרתי לאחד הקולגות שלי על הקורס הזה שמתכונן להסמכה.

צ'יטים של הנדסת נתונים של גוגלמאת Maverick Lin

עלות: ללא תשלום.
זמן: לא ידוע.
תוֹעֶלֶת: לא מוערך.

משאב נוסף שנתקלתי בו לאחר הבחינה. זה נראה מקיף, אבל המצגת די קצרה. בנוסף, זה בחינם. אתה יכול להפנות אליו בין בחינות תרגול ואפילו לאחר הסמכה כדי לרענן את הידע שלך.

מה עשיתי אחרי הקורס?

כשהתקרבתי לסיום הקורסים שלי, הזמנתי את הבחינה שלי בהתראה של שבוע.

קיום מועד אחרון הוא מוטיבציה מצוינת לסקור את מה שלמדת.

ניגשתי לבחינות האקדמיה של לינוקס ו-Google Cloud מספר פעמים עד שהתחלתי לצבור בעקביות מעל 95%.

עבר את מבחן התרגול באקדמיית לינוקס בפעם הראשונה עם ציון של מעל 90%.

הבדיקות לכל פלטפורמה דומות; רשמתי וניתחתי את השאלות שטעיתי כל הזמן - זה עזר לבטל את החולשות שלי.

במהלך הבחינה עצמה, הנושא היה פיתוח מערכות עיבוד נתונים ב-Google Cloud באמצעות שתי דוגמאות (תוכן הבחינה השתנה מאז 29 במרץ 2019). כל הבחינה הייתה שאלות ברירות רבות.

הבחינה נמשכה שעתיים ונראתה קשה בכ-20% מבחינות התרגול שהכרתי.

עם זאת, האחרונים הם משאב בעל ערך רב.

מה אשנה אם אבחן שוב?

עוד בחינות תרגול. יותר ידע מעשי.

כמובן שתמיד אפשר להכין קצת יותר טוב.

הדרישות המומלצות ציינו יותר משלוש שנות ניסיון בשימוש ב-GCP, שלא היה לי - אז נאלצתי להתמודד עם מה שיש לי.

בנוסף

הבחינה עודכנה ב-29 במרץ. החומר במאמר זה עדיין יספק בסיס טוב להכנה, אך חשוב לשים לב לכמה שינויים.

מדורי בחינות מהנדס נתונים מקצועי של Google Cloud (גירסה של 1)

1. עיצוב מערכות עיבוד נתונים.
2. בנייה ותמיכה של מבני נתונים ומסדי נתונים.
3. ניתוח נתונים וחיבור של למידת מכונה.
4. מידול תהליכים עסקיים לניתוח ואופטימיזציה.
5. הבטחת אמינות.
6. הדמיית נתונים ותמיכה בהחלטות.
7. תכנון תוך התמקדות בבטיחות ותאימות.

מדורי בחינות מהנדס נתונים מקצועי של Google Cloud (גירסה של 2)

1. עיצוב מערכות עיבוד נתונים.
2. בנייה ותפעול של מערכות עיבוד נתונים.
3. תפעול מודלים של למידת מכונה (רוב השינויים קרו כאן) [חָדָשׁ].
4. הבטחת איכות הפתרונות.

בגרסה 2, סעיפים 1, 2, 4 ו-6 של גרסה 1 משולבים לסעיפים 1 ו-2, סעיפים 5 ו-7 לסעיף 4. סעיף 3 בגרסה 2 הורחב כדי לכסות את כל יכולות למידת המכונה החדשות ב-Google ענן.

שינויים אלה התרחשו לאחרונה, ולכן חומרים חינוכיים רבים לא הספיקו להתעדכן.

עם זאת, אם אתה משתמש בחומרים מהמאמר, זה אמור להספיק כדי לכסות 70% מהידע הנדרש. הייתי גם סוקר את הנושאים הבאים בעצמי (הם הופיעו בגרסה השנייה של הבחינה):

• API של Google Machine Learning (ML).
• Google Cloud Machine Learning Core.
• TPU עבור Google Cloud (חומרה שפותחה על ידי גוגל במיוחד עבור למידת מכונה).
• מילון מונחים של Google למונחי למידת מכונה.

כפי שניתן לראות, עדכון הבחינה קשור בעיקר ליכולות למידת המכונה של Google Cloud.

עדכון מתאריך 29.04.2019 באפריל XNUMX. קיבלתי הודעה ממדריך קורס באקדמיית לינוקס (מת'יו אוסיאן).

רק להתייחסות, אנו מתכננים לעדכן את קורס מהנדס נתונים באקדמיית לינוקס כדי לשקף את היעדים החדשים מתישהו באמצע עד סוף מאי.

אחרי בחינה

לאחר שתעבור את הבחינה, תקבל תוצאה של מעבר או נכשל. במבחנים בפועל אומרים לשאוף למינימום 70%, אז כיוונתי ל-90%.

לאחר שתעבור בהצלחה את הבחינה, תקבל קוד הפעלה בדוא"ל יחד עם האישור הרשמי של Google Cloud Professional Data Engineer. מזל טוב!

ניתן להשתמש בקוד ההפעלה בחנות האקסקלוסיבית של Google Cloud Professional Data Engineer, שבה אתה יכול לקבל קצת כסף טוב: יש חולצות טריקו, תיקי גב וקפוצ'ונים (ייתכן שחלקם אזלו מהמלאי בזמן המשלוח). בחרתי בסווטשירט.

לאחר הסמכה, תוכל להפגין את כישוריך (רשמית) ולחזור לעשות את מה שאתה עושה הכי טוב: בניית מערכות.

נתראה בעוד שנתיים להסמכה מחדש.

נ.ב תודה רבה למורים הנפלאים של הקורסים הנ"ל ו מקס קלסן למתן משאבים וזמן ללימוד והכנה לבחינה.

לגבי המתרגם

המאמר תורגם על ידי אלקונסט.

אלקונוסט מאורס לוקליזציה של המשחק, אפליקציות ואתרי אינטרנט ב-70 שפות. מתרגמים ילידים, בדיקות לשוניות, פלטפורמת ענן עם API, לוקליזציה מתמשכת, מנהלי פרויקטים 24/7, כל פורמטים של משאבי מחרוזת.

גם אנחנו עושים סרטוני תדמית וחינוכית - לאתרים, מכירה, תמונה, פרסום, חינוך, טיזרים, הסברים, טריילרים עבור Google Play ו-App Store.

→ קרא עוד

מקור: www.habr.com