Как издържах изпита за сертифициране на Google Cloud Professional Data Engineer

Без препоръчителните 3 години практически опит

Преди началото на курса Инженер по данни, искаме да споделим с вас превод на една много интересна история, която със сигурност ще бъде полезна на бъдещите инженери на данни. Отивам!

Худи от Google: облечете. Сериозно работно изражение на лицето: присъства. Снимка от видео версията на тази статия на YouTube.

Забележка. Тази статия обхваща изпита за сертифициране на Google Cloud Professional Data Engineer до 29 март 2019 г. Има някои промени от тази дата. Включил съм ги в секцията Екстри.

И така, искаш ли да получиш нова качулка като на корицата ми? Или мислите да се сертифицирате? Google Cloud Professional Data Engineer и се чудя как да го направя.

През последните няколко месеца ходих на курсове заедно с използването на Google Cloud, за да се подготвя за изпита за професионален инженер по данни. Тогава се опитах да го подмина и мина. И няколко седмици по-късно качулката ми беше доставена. Сертификатът дойде бързо.

Тази статия ще изброи няколко неща, които може да искате да знаете, и стъпките, които предприех, за да получа сертификацията си за Google Cloud Professional Data Engineer.

Защо бихте искали да бъдете сертифицирани като Google Cloud Professional Data Engineer?

Данните са навсякъде. Знанието как да се изграждат системи, които могат да обработват и използват данни, е необходимо. Google Cloud предоставя инфраструктурата за изграждане на тези системи.

Може вече да имате уменията да използвате Google Cloud, но как ще демонстрирате това на бъдещ работодател или клиент? Има два начина: портфолио от проекти или сертифициране.

Сертификатът казва на бъдещите клиенти и работодатели: „Имам уменията и съм положил усилия, за да бъда акредитиран“.

Кратко описание от Google го обобщава.

Демонстрирайте способността си да проектирате и изграждате системи за данни и да изграждате модели за машинно обучение в Google Cloud Platform.

Ако все още нямате умения, преминаването през уроците за сертифициране означава, че ще научите всичко за това как да изграждате системи за данни от световна класа в Google Cloud.

Кой би искал да бъде сертифициран като Google Cloud Professional Data Engineer?

Видяхте числата. Облакът расте. Вече е тук и няма да отиде никъде. Ако все още не сте видели числата, повярвайте ми, облакът расте.

Независимо дали вече сте учен по данни, инженер по данни, анализатор на данни, инженер по машинно обучение или търсите възможност за кариера в света на данните, сертифицирането Google Cloud Professional Data Engineer е за вас.

Възможността за използване на облака се превръща в изискване за всяка позиция, ориентирана към данни.

Имате ли нужда от сертификат, за да бъдете добър инженер по данни/учен по данни/инженер по машинно обучение?

Не.

Все още можете да използвате Google Cloud за решения за пренос на данни без сертификат.

Сертификатът е само един от методите за валидиране на съществуващи умения.

Колко струва?

Цената на изпита е $200. Ако не успеете, ще трябва да платите отново за нов опит.

Възможно е да има разходи, свързани с подготвителните курсове и използването на самата платформа.

Таксите на платформата са такси за използване на услугите на Google Cloud. Ако сте сложен потребител, вече сте наясно с това. Ако не, и тепърва започвате с уроците в тази статия, можете да създадете нов акаунт в Google Cloud и да останете в рамките на офертите на Google за $300 при регистрация.

Ще стигнем до цената на курса след секунда.

Колко дълго е валиден сертификатът?

2 години. След това ще трябва да положите изпита отново.

И тъй като Google Cloud се развива всеки ден, вероятно е това, което се изисква за сертификат, да се промени (както разбрах, вече се е променило, когато започнах да пиша тази статия).

Какво ви е необходимо, за да се подготвите за изпита?

Google препоръчва 3+ години опит в индустрията и 1+ година разработване и управление на решения с помощта на GCP за сертифициране на професионално ниво.

Нямах нищо от горното.

Въз основа на 6 месеца подходящ опит. За да компенсирам липсата, използвах комбинация от онлайн ресурси за обучение.

Какви курсове взех?

Ако сте като мен и нямате препоръчителните изисквания, можете да вземете някои от следните курсове, за да повишите уменията си.

Следните курсове са това, което използвах, за да се подготвя за сертифицирането. Те са изброени по ред на попълване.

Изброих разходите, времето и полезността на полагането на изпита за сертифициране за всички.

Някои от страхотните онлайн ресурси, които използвах, за да подобря уменията си преди изпита. По ред: Облачен гуру, Linux академия и Coursera.

Инженеринг на данни в Google Cloud Platform от Coursera

Цена: $49 на месец (след 7-дневен безплатен пробен период)
път: 1-2 месеца, 10+ часа на седмица
полезност: 8 / 10

Инженеринг на данни в Google Cloud Platform от Coursera създаден в сътрудничество с Google Cloud.

Той е разделен на пет подкурса, всеки от които отнема около 10 часа на седмица учебно време.

Ако сте нов в обработката на данни в Google Cloud, тази специализация ще ви отведе от ниво 0 до ниво 1. Ще завършите поредица от практически упражнения с помощта на итеративна платформа, наречена QwikLabs. Преди това ще има лекции на Google Cloud практици за това как да използвате различни услуги като Google BigQuery, Cloud Dataproc, Dataflow и Bigtable.

Представяне на Cloud Guru в Google Cloud Platform

Цена: безплатно
път: 1 седмица, 4-6 часа
полезност: 4 / 10

Не приемайте ниския резултат за полезност като показател за безполезността на курса. Това далеч не е вярно. Единствената причина, поради която получава по-нисък резултат, е, че не е фокусиран върху сертифицирането на професионален инженер по данни (както подсказва името).

След като завърших специализацията на Coursera, взех този курс като опреснител, защото използвах Google Cloud само за няколко случая на специализирана употреба.

Ако идвате от друг доставчик на облак или никога преди не сте използвали Google Cloud, може да искате да вземете този курс. Това е чудесно въведение в Google Cloud Platform като цяло.

Google Certified Professional Data Engineer от Linux Academy

Цена: $49 на месец (след 7-дневен безплатен пробен период)
път: 1-4 седмици, 4+ часа на седмица
полезност: 10 / 10

След завършване на изпита и размисъл върху курсовете, които взех, най-полезният беше Google Certified Professional Data Engineer от Linux Academy.

Видео също Електронна книга с досиета с данни (страхотен безплатен ресурс за обучение, който идва с курса) и практическите изпити направиха този курс един от най-добрите учебни ресурси, които някога съм използвал.

Дори го препоръчах като справка в някои бележки на Slack за екипа след изпита.

Бележки в Slack

• Някои неща от изпита не бяха в изпитите в Linux Academy, Cloud Guru или Google Cloud Practice (очаква се)
• 1 въпрос с графика на точки от данни, за това кое уравнение трябва да ги групирате (например cos(X) или X² + Y²)
• Познаването на разликите между Dataflow, Dataproc, Datastore, Bigtable, BigQuery, Pub/Sub и как могат да се използват е задължително.
• Двата работни примера за изследване на изпита бяха абсолютно същите като тези в тренировъчната сесия, въпреки че изобщо не споменах тези изследвания по време на изпита (въпросите дадоха достатъчна представа).
• Познаването на основния синтаксис на SQL заявките е много полезно, особено за BigQuery въпроси.
• Практическите изпити, предоставени от Linux Academy и GCP, са много сходни по стил с въпросите от изпита и аз ще преработя всеки от тях няколко пъти и ще ги използвам, за да открия вашите слабости.
• Малък съвет за помощ при Dataproc: „dataproc крокодилът и Hadoop слонът планира да Искра огън и гответе Кошер of Прасета" {Крокодил dataproc и слон Hadoop планира да запали огънИскра - искра, запалете огън - направете огън) и сгответе рояк (Кошер) прасета (Прасе)} (Dataproc работи с Hadoop, Spark, Hive и Pig)
• «Поток от данни е течаща Лъч от светлина" {Поток от данни това е текущият лъч (Лъч) light} (Dataflow работи с Apache Beam)
• "Всеки по света може да се отнася до a добре направена КИСЕЛИНА измита Гаечен ключ" {Всеки в световен мащаб може да се справи с пречистена киселина (ACID) с твърд гаечен ключ (гаечен ключ)} (Cloud Spanner е база данни, предназначена да издигне облака от нулата, съвместима с ACID и достъпна по целия свят)
• Може да е полезно да знаете имената на класически релационни и нерелационни бази данни (например MongoDB, Cassandra)
• Ролите на IAM се различават леко за всяка услуга, но е полезно да разберете как да отделите потребителите от възможността да виждат данни, без да отнемат възможността да проектират работни потоци (напр. ролята „Работник на поток от данни“ може да проектира работни потоци, но не и да вижда данни)

Това вероятно е достатъчно за сега. Пробегът вероятно ще се различава от изпит до изпит. Курсът на Linux Academy ще ви даде 80% от знанията.

1-минутни видеоклипове в Google Cloud

Цена: безплатно
път: 1-2 часа
полезност: 5 / 10

Те са препоръчани във форумите на Cloud Guru. Много от тях не бяха свързани със сертифицирането за професионален инженер по данни, но аз избрах няколко, които са.

Някои услуги може да изглеждат сложни, когато преминавате през курса, така че беше приятно да чуете как е описана конкретна услуга за минута.

Подготовка за изпита Cloud Professional Data Engineer

Цена: $49 на сертификат или безплатно (без сертификат)
път: 1-2 седмици, 6+ часа на седмица
полезност: N / A

Намерих този ресурс ден преди планирания ми изпит. Не го завърших поради ограничения във времето, оттам и липсата на оценка за полезност.

Въпреки това, от страницата с общ преглед на курса, изглежда като страхотен ресурс, за да съберете всичко, което сте научили за Google Cloud Data Engineering и да подчертаете всички слабости.

Препоръчах този курс като ресурс на един от моите колеги, който се подготвя за сертифициране.

Маверик Лин, Google Data Engineering Cheat Sheet

Цена: безплатно
път: N/A
полезност: N/A

Това беше друг ресурс, на който случайно попаднах след изпита. Според мен той е изчерпателен, но в същото време кратък. Освен това е безплатно. Може да се използва за четене между практически изпити или дори след сертифициране, за да освежите знанията си.

Какво направих след курса?

С наближаването на края на курсовете си записах изпита с едноседмично предизвестие.
Наличието на краен срок е страхотна мотивация да затвърдите това, което сте научили.

Многократно се явявах на практически изпити от Linux Academy и Google Cloud, докато успях да ги завърша с 95%+ точност всеки път.

Преминаване на практическия изпит на Linux Academy с над 90% за първи път.

Тестовете от всяка платформа са сходни, но открих, че преминаването през въпросите, които постоянно грешах, и записването защо ги разбирам погрешно ми помогна да стегна слабите си места.

Изпитът, който взех, използва като тема два примерни изследователски проекта за разработване на системи за обработка на данни в Google Cloud (от 29 март 2019 г. това се промени). И беше с многократен избор навсякъде.

Отне ми около 2 часа. И беше с около 20% по-труден от всички изпити, които взех.

Не мога да изразя достатъчно стойността на практическите изпити.

Какво бих променил, ако отида отново?

Още практически изпити. Повече практически знания.

Разбира се, винаги има повече подготовка, която можете да направите.

Препоръчителното изискване гласи повече от 3 години използване на GCP. Но аз го нямах, така че трябваше да се справя с това, което имах.

Освен това

Изпитът беше актуализиран на 29 март. Материалът, представен в тази статия, все още осигурява добра основа, но е важно да се отбележат някои промени.

Различни раздели от изпита Google Cloud Professional Data Engineer (версия 1г)

1. Проектиране на системи за обработка на данни
2. Създаване и поддръжка на структури и бази данни.
3. Анализ на данни и връзка с машинно обучение
4. Моделиране на бизнес процеси за анализ и оптимизация
5. Осигуряване на надеждност
6. Визуализация на данни и поддръжка на политики
7. Проектиран за безопасност и съответствие

Различни раздели от изпита Google Cloud Professional Data Engineer (версия 2г)

1. Проектиране на системи за обработка на данни
2. Изграждане и експлоатация на системи за обработка на данни
3. Операционализация на модели за машинно обучение (повечето от промените се случиха тук) [НОВО]
4. Гарантиране на качеството на решенията

Версия 2 обедини раздели 1, 2, 4 и 6 от версия 1 в 1 и 2. Тя също така обедини раздели 5 и 7 от версия 1 в раздел 4. А раздел 3 от версия 2 беше разширен, за да обхване целия нов Google Cloud Възможности за машинно обучение.

Тъй като тези промени са толкова скорошни, много от учебните материали не са могли да бъдат актуализирани.

Въпреки това, запознаването с материалите в тази статия трябва да е достатъчно, за да покрие 70% от това, от което се нуждаете. Бих комбинирал това с някои ваши собствени изследвания по следните въпроси (които бяха представени във втората версия на изпита).

• API за машинно обучение (ML - Machine Learning) Google
• Google Cloud Machine Learning Engine
• Google Cloud TPU (персонализирано оборудване, проектирано от Google специално за обучение по ML)
• Google Речник на термините за машинно обучение

Както можете да видите, последната актуализация на изпита се фокусира върху функциите за машинно обучение в Google Cloud.

Актуализация 29/04/2019: Съобщение от инструктора на курса на Linux Academy Матю Уласейн.
Само за справка, планираме да актуализираме курса по Data Engineer в Linux Academy, за да отразим новите курсове, които ще започнат някъде в средата/края на май.

След изпит

Когато издържите изпита, ще получите само положителен или неуспешен резултат. Препоръчвам да се стремите към поне 70%, така че се стремях към минимум 90% на практическите изпити.

След завършване ще получите код за обратно изкупуване по имейл заедно с официалното сертифициране на Google Cloud Professional Data Engineer. Честито!

Можете да използвате кода за обратно изкупуване в ексклузивния магазин на Google Cloud Professional Data Engineer, който е пълен с хаос (SWAG). Има тениски, раници и качулки (може да не са в наличност, докато стигнете). Избрах качулки.

Сега сте сертифицирани, можете да покажете набора си от умения (официално) и да се върнете към това, което правите най-добре, изграждането.

Ще се видим след две години за повторно сертифициране.

PS: Ако имате въпроси или желаете разяснение, можете да се свържете с мен на Twitter и LinkedIn, за YouTube Има и видео версия на тази статия.
PPS: много благодаря на всички прекрасни учители във всички горепосочени курсове и Макс Келзен за осигуряване на ресурси и време за обучение и подготовка за изпита.

А всички, които искат да научат повече за програмата на курса, характеристиките на онлайн формата, уменията, компетенциите и перспективите, които очакват завършилите след обучението, ви каним на Отворен ден, което ще се състои днес от 20.00ч.

Източник: www.habr.com