Без рэкамендуемага 3-х гадовага практычнага вопыту
Напярэдадні старту заняткаў па курсе , хочам падзяліцца з Вамі перакладам адной вельмі цікавай гісторыі, якая, напэўна, будзе карысная будучым дата інжынерам. Паехалі!
Худзі ад Google: надзета. Сур'ёзны працоўны выраз твару: прысутнічае. Фота з відэа версіі гэтага артыкула на .
Заўвага. Гэты артыкул прысвечаны сертыфікацыйнаму іспыту Google Cloud Professional Data Engineer да 29 сакавіка 2019 года. Пасля гэтай даты адбыліся некаторыя змены. Я ўключыў іх у раздзел "Дадаткова".
Такім чынам, вы хочаце атрымаць новае худзі, як у мяне на вокладцы? Ці вы задумалі атрымаць сертыфікат і задаецца пытаннем, як гэта зрабіць.
У апошнія некалькі месяцаў я праходзіў курсы нараўне з выкарыстаннем Google Cloud для падрыхтоўкі да іспыту на званне прафесійнага дата-інжынера. Потым я паспрабаваў здаць яго і здаў. І праз некалькі тыдняў было дастаўлена маё худзі. Сертыфікат прыйшоў хутчэй.
У гэтым артыкуле будзе пералічана некалькі рэчаў, якія вы, магчыма, хочаце даведацца, і крокі, якія я зрабіў для атрымання сертыфіката Google Cloud Professional Data Engineer.
Чаму вы хацелі б прайсці сертыфікацыю Google Cloud Professional Data Engineer?
Дадзеныя паўсюль. І веданне таго, як ствараць сістэмы, якія могуць апрацоўваць і выкарыстоўваць дадзеныя, з'яўляецца запатрабаваным. Google Cloud дае інфраструктуру для пабудовы гэтых сістэм.
Магчыма, у вас ужо ёсць навыкі выкарыстання Google Cloud, але як вы прадэманструеце гэта будучаму працадаўцу ці кліенту? Ёсць два спосабу: партфоліё праектаў ці сертыфікацыі.
Сертыфікат кажа будучым кліентам і працадаўцам: "У мяне ёсць навыкі, і я прыклаў намаганні, каб атрымаць акрэдытацыю".
Кароткае апісанне ад Google падводзіць вынік.
Прадэманструйце сваё ўменне праектаваць і ствараць сістэмы апрацоўкі дадзеных, а таксама ствараць мадэлі машыннага навучання на Google Cloud Platform.
Калі ў вас яшчэ няма навыкаў, азнаямленне з навучальнымі матэрыяламі для сертыфікацыі мае на ўвазе, што вы даведаецеся ўсё аб тым, як ствараць сістэмы апрацоўкі дадзеных сусветнага ўзроўню ў Google Cloud.
Хто захацеў бы прайсці сертыфікацыю Google Cloud Professional Data Engineer?
Вы бачылі лічбы. Воблака расце. Яно ўжо тут і не збіраецца нікуды дзявацца. Калі вы яшчэ не бачылі лічбы, паверце, воблака расце.
Калі вы ўжо з'яўляецеся спецыялістам па дадзеных, дата-інжынерам, дата-аналітыкам, інжынерам па машынным навучанні або шукаеце магчымасць кар'ернага росту ў свеце дадзеных, сертыфікацыя Google Cloud Professional Data Engineer для вас.
Магчымасць выкарыстання хмарных тэхналогій становіцца патрабаваннем для любой пазіцыі, арыентаванай на дадзеныя.
Ці патрэбен вам сертыфікат, каб быць добрым дата-інжынерам/ дата-саетыстам/інжынерам машыннага навучання?
Няма.
Вы ўсё яшчэ можаце выкарыстоўваць Google Cloud для працы з рашэннямі па перадачы даных без сертыфіката.
Сертыфікат з'яўляецца толькі адным з метадаў пацверджання існуючых навыкаў.
Колькі гэта каштуе?
Кошт іспыту складае 200 долараў ЗША. Калі вы патрываеце няўдачу, вам давядзецца зноў плаціць за новую спробу.
Магчымы выдаткі, звязаныя з падрыхтоўчымі курсамі і выкарыстаннем самой платформы.
Выдаткі на платформу - гэта плата за выкарыстанне сэрвісаў Google Cloud. Калі вы спрактыкаваны карыстач, вы і так ужо дасведчаныя аб гэтым. Калі не, і вы толькі знаёміцеся з навучальнымі матэрыяламі, апісанымі ў гэтым артыкуле, вы можаце стварыць новы ўліковы запіс Google Cloud і ўкласціся ў межах 300 даляраў, якія прапануе Google пры рэгістрацыі.
Мы пяройдзем да кошту курса праз секунду.
Як доўга актуальная сертыфікацыя?
2 гады. Пасля гэтага вам трэба будзе зноў здаваць іспыт.
А паколькі Google Cloud развіваецца кожны дзень, верагодна, што тое, што патрабуецца для сертыфіката, зменіцца (як я высветліў, ужо змянілася да моманту, калі я пачаў пісаць гэты артыкул).
Што трэба для падрыхтоўкі да іспыту?
Google рэкамендуе больш за 3 гады вопыту работы ў галіны і больш за 1 год распрацоўкі і кіравання рашэннямі з выкарыстаннем GCP для сертыфікацыі на прафесійным узроўні.
У мяне не было нічога з вышэйпералічанага.
Ад сілы па 6 месяцаў адпаведнага досведу. Каб кампенсаваць недахоп, я выкарыстаў камбінацыю навучальных анлайн рэсурсаў.
Якія курсы я прайшоў?
Калі вы такі ж як я і ў вас няма рэкамендуемых патрабаванняў, вы можаце прайсці некаторыя з наступных курсаў, каб павысіць узровень сваёй кваліфікацыі.
Ніжэй наступныя курсы - гэта тое, што я выкарыстаў для падрыхтоўкі да сертыфікацыі. Яны пералічаны ў парадку завяршэння.
Я ўказаў кошт, тэрміны і карыснасць для здачы сертыфікацыйнага іспыту для кожнага.
Некаторыя з выдатных анлайн-рэсурсаў, якія я выкарыстаў для павышэння кваліфікацыі да іспыту. Па парадку: , и .
Кошт: 49 долараў ЗША ў месяц (пасля 7-дзённай бясплатнай пробнай версіі)
Час: 1-2 месяцы, 10+ гадзін у тыдзень
карыснасць: 8 / 10
створаны ў супрацоўніцтве з Google Cloud.
Ён разбіты на пяць падкурсаў, кожны з якіх займае каля 10 гадзін на тыдзень навучальнага часу.
Калі вы не знаёмыя з апрацоўкай дадзеных у Google Cloud, гэтая спецыялізацыя павысіць ваш узровень ад 0 да 1. Вы пройдзеце шэраг практычных практыкаванняў, выкарыстоўваючы ітэратыўную платформу пад назвай QwikLabs. Да гэтага будуць праводзіцца лекцыі практыкаў Google Cloud аб тым, як выкарыстоўваць розныя сэрвісы, такія як Google BigQuery, Cloud Dataproc, Dataflow і Bigtable.
Кошт: бясплатна
Час: 1 тыдзень, 4-6 гадзін
карыснасць: 4 / 10
Не лічыце нізкі бал карыснасці за паказчык бескарыснасці курса. Гэта далёка не так. Адзіная прычына, па якой ён атрымлівае ніжэйшы бал, заключаецца ў тым, што ён не сфакусаваны на сертыфікацыі прафесійнага дата-інжынера (гэта можна зразумець з назвы).
Пасля праходжання спецыялізацыі Coursera я ўспрыняў гэты курс як перападрыхтоўку, таму што я выкарыстоўваў Google Cloud толькі для некалькіх спецыялізаваных юзкейсаў.
Калі вы прыйшлі ад іншага пастаўшчыка хмарных паслуг або ніколі раней не выкарыстоўвалі Google Cloud, магчыма, вам трэба было б прайсці гэты курс. Гэта выдатнае ўвядзенне ў Google Cloud Platform у цэлым.
Кошт: 49 долараў ЗША ў месяц (пасля 7-дзённай бясплатнай пробнай версіі)
Час: 1-4 тыдні, 4+ гадзіны ў тыдзень
карыснасць: 10 / 10
Пасля завяршэння іспыту і разважанняў аб курсах, якія я праходзіў, найбольш карысным аказаўся .
Відэа, а таксама (выдатны бясплатны навучальны рэсурс, які пастаўляецца разам з курсам) і практычныя іспыты зрабілі гэты курс адным з лепшых навучальных рэсурсаў, якія я калі-небудзь выкарыстаў.
Я нават рэкамендаваў яго ў якасці даведачнага матэрыялу ў некаторых нататках у Slack для каманды пасля іспыту.
Нататкі ў Slack
- Некаторыя рэчы на іспыце не былі на іспытах ні ў Linux Academy, ні ў Cloud Guru, ні ў Google Cloud Practice (чакана)
- 1 пытанне з графікам з кропак дадзеных, пра тое якім раўнаннем вам варта іх згрупаваць (напрыклад, cos(X) або X² + Y²)
- Веданне адрозненняў паміж Dataflow, Dataproc, Datastore, Bigtable, BigQuery, Pub/Sub і тым, як іх можна выкарыстоўваць, з'яўляецца абавязковым.
- Два працоўныя прыклады даследаванняў на іспыце былі сапраўды такія ж, як і на практычных занятках, хоць я не звяртаўся да гэтых даследаванняў наогул падчас іспыту (пытанні далі дастатковае разуменне).
- Веданне базавага сінтаксісу SQL-запытаў вельмі карысна, асабліва для пытанняў па BigQuery.
- Практычныя іспыты, прадстаўленыя Linux Academy і GCP, вельмі падобныя па стылі на экзаменацыйныя пытанні, і я прапрацую кожны з іх некалькі разоў і буду іх выкарыстоўваць, каб высветліць вашыя слабыя месцы.
- Невялікая прыказка, каб дапамагчы з Dataproc: “Dataproc the croc and Hadoop the elephant plan to Іскрыцца fire and cook a Вулей of Свінні” {Кракадзіл Dataproc і слон Hadoop плануюць развесці вогнішча (Іскрыцца - іскра, spark a fire - развесці вогнішча) і прыгатаваць a рой (Вулей) свіней (свіння)} (Dataproc мае справу з Hadoop, Spark, Hive і Pig)
- «Паток дадзеных is a flowing Прамень of light» {Паток дадзеных гэта бягучы прамень (Прамень) святла} (Dataflow мае справу з Apache Beam)
- «Everyone па ўсім свеце can relate to a well-made ACID washed Spanner» {Хто заўгодна ва ўсім свеце мог мець справу з вычышчаным кіслатой (ACID) дыхтоўным гаечным ключом (Spanner)} (Cloud Spanner - гэта БД, прызначаная для ўзняцця аблокі з нуля, сумяшчальная з ACID і даступная па ўсім свеце)
- Можа спатрэбіцца веданне імёнаў класічных варыянтаў рэляцыйных і нерэляцыйных баз дадзеных (напрыклад, MongoDB, Cassandra)
- Ролі IAM крыху адрозніваюцца для кожнай службы, але карысна разумець, як аддзяляць карыстальнікаў ад магчымасці бачыць дадзеныя, не пазбаўляючы магчымасці праектаваць працоўныя працэсы (напрыклад, роля "Dataflow Worker" можа праектаваць працоўныя працэсы, але не бачыць дадзеныя)
Гэтага, напэўна, пакуль дастаткова. Кіламетраж, верагодна, будзе адрознівацца ад іспыту да іспыту. Курс Linux Academy дасць 80% ведаў.
Кошт: бясплатна
Час: 1-2 гадзіны
карыснасць: 5 / 10
Яны былі рэкамендаваны на форумах Cloud Guru. Многія з іх не былі звязаны з сертыфікацыяй Professional Data Engineer, аднак я адабраў некаторыя з іх, якія падыходзяць.
Некаторыя сэрвісы могуць падацца складанымі пры праходжанні курса, таму было прыемна паслухаць, як канкрэтны сэрвіс апісваюць за хвіліну.
Кошт: 49 долараў ЗША за сертыфікат або бясплатна (без сертыфіката)
Час: 1-2 тыдні, 6+ гадзін у тыдзень
карыснасць: N /
Я знайшоў гэты рэсурс за дзень да прызначанага іспыту. Я не скончыў яго з-за часавых абмежаванняў, адсюль і адсутнасць рэйтынгу карыснасці.
Тым не менш, мяркуючы па агляднай старонцы курса, ён выглядае як выдатны рэсурс, каб сабраць разам усё, што вы даведаліся аб Data Engineering у Google Cloud, і вылучыць любыя слабыя месцы.
Я параіў гэты курс у якасьці рэсурсу аднаму з маіх калегаў, які рыхтуецца да сэртыфікацыі.
Кошт: бясплатна
Час: Н/Д
карыснасць: Н/Д
Гэта быў яшчэ адзін рэсурс, на які я натрапіў пасля іспыту. На мой погляд, ён усёабдымны, але ў той жа час лаканічны. Плюс, ён бясплатны. Ён можа быць выкарыстаны для чытання паміж практычнымі іспытамі ці нават пасля сертыфікацыі, каб асвяжыць веды.
Што я рабіў пасля курсаў?
Падышоўшы бліжэй да заканчэння курсаў, я забраніраваў экзамен з апавяшчэннем за тыдзень.
Наяўнасць дэдлайна - выдатная матывацыя для ўмацавання таго, што вы даведаліся.
Я неаднаразова праходзіў практычныя іспыты ад Linux Academy і Google Cloud, пакуль не быў у стане завяршаць іх з дакладнасцю 95%+ кожны раз.
Здача практычнага іспыту Linux Academy на больш за 90% упершыню.
Тэсты ад кожнай платформы падобныя, але я выявіў, што, перабіраючы пытанні, на якія я ўвесь час адказваў няправільна, і запісваючы, чаму я іх няправільна зразумеў, дапамагло падцягнуць мае слабыя месцы.
Іспыт, які я здаў, выкарыстаў у якасці тэмы два прыклады даследчых праектаў для распрацоўкі сістэм апрацоўкі дадзеных у Google Cloud (з 29 сакавіка 2019 года гэта змянілася). І быў са шматлікім выбарам на ўсім сваім працягу.
Ён заняў у мяне каля 2 гадзін. І быў прыкладна на 20% складаней, чым любы з іспытаў, якія я здаваў.
Я не магу выказаць каштоўнасць практычных іспытаў у дастатковай ступені.
Што б я змяніў, калі б зноў пайшоў?
Больш практычных іспытаў. Больш практычных ведаў.
Вядома, заўсёды ёсць яшчэ больш падрыхтоўкі, якую вы маглі б зрабіць.
У рэкамендуемых патрабаваннях указваецца больш за 3 гады выкарыстання GCP. Але ў мяне не было гэтага, таму мне прыйшлося мець справу з тым, што ў мяне было.
Дадаткова
Іспыт быў абноўлены 29 сакавіка. Матэрыялы, прадстаўленыя ў гэтым артыкуле, па-ранейшаму даюць добрую аснову, аднак важна адзначыць некаторыя змены.
Розныя часткі экзамена Google Cloud Professional Data Engineer ()
- Праектаванне сістэм апрацоўкі дадзеных
- Стварэнне і падтрымка структур і баз даных.
- Аналіз дадзеных і падлучэнне машыннага навучання
- Мадэляванне бізнес-працэсаў для аналізу і аптымізацыі
- Забеспячэнне надзейнасці
- Візуалізацыя дадзеных і падтрымка палітык
- Праектаванне для бяспекі і адпаведнасці
Розныя часткі экзамена Google Cloud Professional Data Engineer ()
- Праектаванне сістэм апрацоўкі дадзеных
- Пабудова і эксплуатацыя сістэм апрацоўкі даных
- Аперацыяналізацыя мадэляў машыннага навучання (большасць змен адбылося тут) [НОВА]
- Забеспячэнне якасці рашэнняў
Версія 2 аб'яднала секцыі 1, 2, 4 і 6 Версіі 1 у 1 і 2. Яна таксама аб'яднала секцыі 5 і 7 з Версіі 1 у секцыю 4. А секцыя 3 Версіі 2 была пашырана, каб ахапіць усе новыя магчымасці машыннага навучання Google Cloud.
Паколькі гэтыя змены адбыліся зусім нядаўна, многія навучальныя матэрыялы не мелі магчымасці абнавіцца.
Аднак азнаямлення з матэрыяламі гэтага артыкула павінна быць дастаткова, каб пакрыць 70% таго, што вам трэба. Я б сумясціў гэта з некаторымі з вашых уласных даследаванняў па наступных пытаннях (яны былі прадстаўлены ў другой версіі іспыту).
- (карыстальніцкая частка абсталявання, распрацаваная Google спецыяльна для трэніроўкі ML)
Як вы можаце бачыць, апошняе абнаўленне іспыту было сфакусавана на магчымасцях ML у Google Cloud.
Абнаўленне 29/04/2019: паведамленне ад выкладчыка курса Linux Academy Мэцью Уласейна.
Проста для даведкі, мы плануем абнавіць курс Data Engineer у Linux Academy, каб адлюстраваць новыя напрамкі, якія пачнуцца дзесьці ў сярэдзіне/канцы траўня.
Пасля іспыту
Калі вы здасце іспыт, вы атрымаеце толькі паспяховы або адмоўны вынік. Раю імкнуцца як мінімум да 70%, таму я нацэліўся на мінімум 90% на практычных іспытах.
Пасля праходжання вы атрымаеце код пагашэння па электроннай пошце разам з афіцыйным сертыфікатам Google Cloud Professional Data Engineer. Віншую!
Вы можаце выкарыстоўваць код пагашэння ў эксклюзіўным краме Google Cloud Professional Data Engineer, які бітком набіты свэгам (). Ёсць футболкі, заплечнікі і худыя (яны могуць адрознівацца ад таго, што будзе на складзе, да таго часу, калі вы туды даберацеся). Я абраў худзі.
Цяпер вы сертыфікаваны, можаце прадэманстраваць свой набор навыкаў (афіцыйна) і вярнуцца да таго, што вы робіце лепш за ўсё, да канструявання.
Убачымся праз два гады, каб прайсці пераатэстацыю.
PS: Калі ў вас ёсць якія-небудзь пытанні ці вы хочаце нешта ўдакладніць, вы можаце знайсці мяне ў и . На таксама ёсць відэа версія гэтага артыкула.
PPS: вялікі дзякуй усім выдатным выкладчыкам на ўсіх вышэйпералічаных курсах і за прадастаўленне рэсурсаў і часу для навучання і падрыхтоўкі да іспыту.
А ўсіх, хто хоча даведацца падрабязней пра праграму курса, асаблівасці анлайн-фармату, навыкі, кампетэнцыі і перспектывы, якія чакаюць выпускнікоў пасля навучання, запрашаем на , які пройдзе ўжо сёння а 20.00.
Крыніца: habr.com