Tövsiyə olunan 3 illik praktiki təcrübə olmadan
Kursun başlamazdan əvvəl , biz sizinlə çox maraqlı bir hekayənin tərcüməsini bölüşmək istəyirik ki, bu, şübhəsiz ki, gələcək data mühəndisləri üçün faydalı olacaqdır. Get!
Google-dan Hoodie: geyin. Ciddi işləyən üz ifadəsi: indiki. Bu məqalənin video versiyasından foto .
Qeyd. Bu məqalə 29 mart 2019-cu il tarixinədək Google Cloud Professional Data Engineer sertifikatlaşdırma imtahanını əhatə edir. Bu tarixdən sonra bəzi dəyişikliklər oldu. Mən onları Əlavələr bölməsinə daxil etmişəm.
Beləliklə, mənim üz qabığımdakı kimi yeni bir kapüşon almaq istəyirsiniz? Yoxsa sertifikat almağı düşünürsünüz? və bunu necə edəcəyini düşünür.
Son bir neçə ayda mən Peşəkar Məlumat Mühəndisi imtahanına hazırlaşmaq üçün Google Buluddan istifadə etməklə yanaşı kurslar da almışam. Sonra onu keçməyə çalışdım və keçdim. Və bir neçə həftə sonra mənim kapüşonum çatdırıldı. Sertifikat tez gəldi.
Bu məqalə sizin bilmək istəyə biləcəyiniz bir neçə şeyi və Google Cloud Professional Data Engineer sertifikatımı almaq üçün atdığım addımları sadalayacaq.
Niyə Google Bulud Peşəkar Məlumat Mühəndisi kimi sertifikat almaq istərdiniz?
Data hər yerdədir. Məlumatları emal edə və istifadə edə bilən sistemlərin necə qurulacağını bilmək tələbatdır. Google Bulud bu sistemləri qurmaq üçün infrastruktur təmin edir.
Ola bilər ki, siz artıq Google Cloud-dan istifadə etmək bacarığınız var, lakin bunu gələcək işəgötürənə və ya müştəriyə necə nümayiş etdirəcəksiniz? İki yol var: layihələr portfeli və ya sertifikatlaşdırma.
Sertifikat potensial müştərilərə və işəgötürənlərə “Mənim bacarıqlarım var və akkreditasiyadan keçmək üçün səy göstərmişəm” deyir.
Google-dan qısa təsvir bunu yekunlaşdırır.
Google Bulud Platformasında məlumat sistemlərini layihələndirmək və qurmaq və maşın öyrənmə modelləri qurmaq bacarığınızı nümayiş etdirin.
Əgər artıq bacarıqlarınız yoxdursa, sertifikatlaşdırma dərslərindən keçmək o deməkdir ki, siz Google Cloud-da dünya səviyyəli məlumat sistemlərini necə quracağınıza dair hər şeyi öyrənəcəksiniz.
Kim Google Bulud Peşəkar Məlumat Mühəndisi kimi sertifikat almaq istərdi?
Rəqəmləri gördünüz. Bulud böyüyür. Artıq buradadır və heç yerə getmir. Əgər rəqəmləri hələ görməmisinizsə, mənə inanın, bulud böyüyür.
Artıq Data Scientist, Data Engineer, Data Analyst, Machine Learning Engineer və ya data dünyasında karyera imkanı axtarırsınızsa, Google Cloud Professional Data Engineer sertifikatı sizin üçündür.
Buluddan istifadə etmək qabiliyyəti istənilən məlumat mərkəzli mövqe üçün tələbə çevrilir.
Yaxşı məlumat mühəndisi/məlumat alimi/maşın öyrənmə mühəndisi olmaq üçün sertifikata ehtiyacınız varmı?
Saylı
Siz hələ də sertifikat olmadan məlumat ötürmə həlləri üçün Google Buluddan istifadə edə bilərsiniz.
Sertifikat mövcud bacarıqları təsdiqləmək üsullarından yalnız biridir.
Nə qədər başa gəlir?
İmtahanın qiyməti 200 dollardır. Əgər uğursuz olarsa, yeni cəhd üçün yenidən ödəməli olacaqsınız.
Hazırlıq kursları və platformanın özünün istifadəsi ilə bağlı xərclər ola bilər.
Platforma ödənişləri Google Bulud xidmətlərindən istifadə üçün ödənişlərdir. Mürəkkəb bir istifadəçisinizsə, bunu artıq bilirsiniz. Əgər yoxsa və siz bu məqalədəki dərsliklərə təzəcə başlayırsınızsa, siz yeni Google Bulud hesabı yarada və qeydiyyatdan keçəndən sonra Google-un təklif etdiyi 300 ABŞ dolları daxilində qala bilərsiniz.
Bir saniyədən sonra kursun qiymətinə çatacağıq.
Sertifikat nə qədər etibarlıdır?
2 il. Bundan sonra yenidən imtahan verməli olacaqsınız.
Və Google Bulud hər gün inkişaf etdiyi üçün, yəqin ki, sertifikat üçün tələb olunanlar dəyişəcək (məlum olduğu kimi, bu məqaləni yazmağa başlayanda artıq dəyişmişdi).
İmtahana hazırlaşmaq üçün nə lazımdır?
Google peşəkar səviyyəli sertifikatlaşdırma üçün GCP-dən istifadə edərək 3+ illik sənaye təcrübəsini və 1+ illik həllərin işlənib hazırlanmasını və idarə olunmasını tövsiyə edir.
Yuxarıdakıların heç biri məndə yox idi.
6 aylıq müvafiq təcrübənin gücü ilə. Çatışmazlığı aradan qaldırmaq üçün mən onlayn öyrənmə resurslarının birləşməsindən istifadə etdim.
Hansı kursları keçdim?
Əgər siz də mənim kimisinizsə və tövsiyə olunan tələblərə malik deyilsinizsə, bacarıqlarınızı artırmaq üçün aşağıdakı kurslardan bəzilərini keçə bilərsiniz.
Aşağıdakı kurslar mənim sertifikatlaşdırmaya hazırlaşdığım kurslardır. Onlar tamamlanma qaydasında sadalanır.
Mən hər kəs üçün sertifikat imtahanından keçməyin qiymətini, vaxtını və faydalılığını sadaladım.
İmtahandan əvvəl bacarıqlarımı artırmaq üçün istifadə etdiyim böyük onlayn resurslardan bəziləri. Sıra ilə: , и .
dəyəri: ayda $49 (7 günlük pulsuz sınaqdan sonra)
vaxt: 1-2 ay, həftədə 10+ saat
Kommunal: 8 / 10
Google Cloud ilə əməkdaşlıqda yaradılmışdır.
O, hər biri həftədə təxminən 10 saat təhsil alan beş alt kursa bölünür.
Əgər siz Google Bulud məlumatlarının emalı ilə tanışsınızsa, bu ixtisas sizi 0 səviyyəsindən 1-ci səviyyəyə aparacaq. Siz QwikLabs adlı iterativ platformadan istifadə edərək bir sıra praktiki məşqləri tamamlayacaqsınız. Bundan əvvəl Google Cloud praktikləri tərəfindən Google BigQuery, Cloud Dataproc, Dataflow və Bigtable kimi müxtəlif xidmətlərdən necə istifadə etmək barədə mühazirələr keçiriləcək.
dəyəripulsuz
vaxt: 1 həftə, 4-6 saat
Kommunal: 4 / 10
Kursun dəyərsizliyinin göstəricisi kimi aşağı faydalılıq balı götürməyin. Bu həqiqətdən uzaqdır. Daha aşağı bal toplamasının yeganə səbəbi peşəkar məlumat mühəndisinin sertifikatlaşdırılmasına diqqət yetirməməsidir (adından göründüyü kimi).
Coursera ixtisasını bitirdikdən sonra mən bu kursu təkmilləşdirmə kimi keçdim, çünki Google Cloud-dan yalnız bir neçə xüsusi istifadə halları üçün istifadə etdim.
Başqa bulud provayderindən gəlirsinizsə və ya əvvəllər heç vaxt Google Buluddan istifadə etməmisinizsə, bu kursu keçmək istəyə bilərsiniz. Bu, ümumilikdə Google Bulud Platformasına əla girişdir.
dəyəri: ayda $49 (7 günlük pulsuz sınaqdan sonra)
vaxt: 1-4 həftə, həftədə 4+ saat
Kommunal: 10 / 10
İmtahanı bitirdikdən və keçdiyim kurslar haqqında düşünəndən sonra ən faydalısı oldu .
Video da (kursla birlikdə gələn əla pulsuz öyrənmə resursu) və təcrübə imtahanları bu kursu indiyə qədər istifadə etdiyim ən yaxşı öyrənmə resurslarından birinə çevirdi.
Hətta imtahandan sonra komanda üçün bəzi Slack qeydlərində bunu istinad kimi tövsiyə etdim.
Slack-də qeydlər
- İmtahandakı bəzi şeylər Linux Akademiyası, Cloud Guru və ya Google Bulud Təcrübəsi imtahanlarında yox idi (gözlənilir)
- Məlumat nöqtələrinin qrafiki olan 1 sual, onları hansı tənliklə qruplaşdırmaq lazımdır (məsələn, cos(X) və ya X² + Y²)
- Dataflow, Dataproc, Datastore, Bigtable, BigQuery, Pub/Sub arasındakı fərqləri və onların necə istifadə oluna biləcəyini bilmək mütləqdir.
- İmtahan zamanı tədqiqatın iki işlək nümunəsi təcrübə sessiyasındakı ilə eyni idi, baxmayaraq ki, imtahan zamanı bu tədqiqatlara ümumiyyətlə istinad etməmişəm (suallar kifayət qədər fikir verdi).
- SQL sorğularının əsas sintaksisini bilmək xüsusilə BigQuery sualları üçün çox faydalıdır.
- Linux Akademiyası və GCP tərəfindən təqdim olunan təcrübə imtahanları üslub baxımından imtahan suallarına çox bənzəyir və mən onların hər biri ilə dəfələrlə işləyəcəm və zəif cəhətlərinizi aşkar etmək üçün onlardan istifadə edəcəyəm.
- Dataproc ilə kömək etmək üçün kiçik bir ipucu: "dataproc timsah və Hadoop fil planlaşdırır Qığılcım od tutub bişirin Arı şanı of Donuzlar" {Timsah dataproc və fil Hadoop yanğın qurmağı planlaşdırırQığılcım - qığılcım, yanğın qığılcım - atəş etmək) və bir sürü bişirmək (Arı şanı) donuzlar (Donuz)} (Dataproc Hadoop, Spark, Hive və Pig ilə məşğul olur)
- «Məlumat axını axandır Şüa işıq" {Məlumat axını bu cari şüadır (Şüa) işıq} (Dataflow Apache Beam ilə məşğul olur)
- "Hər kəs dünyada a aid edilə bilər yaxşı hazırlanmış ACID yuyulur Açar" {Hər kəs bütün dünyada təmizlənmiş turşu ilə məşğul ola bilər (ACID) möhkəm açarla (Spanner)} (Cloud Spanner buludu sıfırdan qaldırmaq üçün nəzərdə tutulmuş verilənlər bazasıdır, ACID-ə uyğundur və bütün dünyada mövcuddur)
- Klassik relational və qeyri-relational verilənlər bazalarının adlarını bilmək faydalı ola bilər (məsələn, MongoDB, Cassandra)
- IAM rolları hər bir xidmət üçün bir qədər fərqlənir, lakin bu, istifadəçiləri iş axınlarını tərtib etmək qabiliyyətini əllərindən almadan məlumatları görə bilməkdən necə ayırmağı başa düşmək üçün faydalıdır (məsələn, "Məlumat axını işçisi" rolu iş axınlarını tərtib edə bilər, lakin məlumatları görə bilməz)
Bu, yəqin ki, hələlik kifayətdir. Yürüş çox güman ki, imtahandan imtahana fərqli olacaq. Linux Akademiyası kursu sizə biliklərin 80%-ni verəcək.
dəyəripulsuz
vaxt: 1-2 saat
Kommunal: 5 / 10
Onlar Cloud Guru forumlarında tövsiyə olunub. Onların bir çoxu Peşəkar Məlumat Mühəndisi sertifikatı ilə əlaqəli deyildi, lakin mən onlardan bir neçəsini seçdim.
Kursu keçərkən bəzi xidmətlər mürəkkəb görünə bilər, ona görə də müəyyən bir xidmətin bir dəqiqə ərzində necə təsvir olunduğunu eşitmək xoş idi.
dəyəri: Sertifikat üçün $49 və ya pulsuz (sertifikatsız)
vaxt: 1-2 həftə, həftədə 6+ saat
Kommunal: N / A
Bu mənbəni planlaşdırılan imtahanımdan bir gün əvvəl tapdım. Vaxt məhdudiyyətləri səbəbindən onu bitirmədim, ona görə də faydalılıq reytinqinin olmaması.
Bununla belə, kursun icmalı səhifəsindən Google Bulud Məlumat Mühəndisliyi haqqında öyrəndiyiniz hər şeyi bir araya toplamaq və zəif cəhətləri vurğulamaq üçün əla mənbə kimi görünür.
Bu kursu sertifikatlaşdırmaya hazırlaşan həmkarlarımdan birinə mənbə kimi tövsiyə etdim.
dəyəripulsuz
vaxt:Yoxdur
Kommunal:Yoxdur
Bu, imtahandan sonra rastlaşdığım başqa bir mənbə idi. Məncə, hərtərəfli, lakin eyni zamanda yığcamdır. Üstəlik, pulsuzdur. Təcrübə imtahanları arasında oxumaq üçün və ya hətta sertifikatlaşdırmadan sonra bilikləri təzələmək üçün istifadə edilə bilər.
Kursdan sonra nə etdim?
Kurslarımın sonuna yaxınlaşdıqca, bir həftəlik xəbərdarlıqla imtahan sifariş etdim.
Son tarixə sahib olmaq öyrəndiklərinizi möhkəmləndirmək üçün böyük motivasiyadır.
Hər dəfə 95%+ dəqiqliklə tamamlaya bilənə qədər Linux Akademiyası və Google Cloud-dan dəfələrlə təcrübə imtahanları verdim.
Linux Akademiyası təcrübə imtahanından ilk dəfə 90%-dən çox keçmək.
Hər platformanın testləri oxşardır, lakin mən tapdım ki, ardıcıl olaraq səhv etdiyim suallardan keçmək və onları niyə səhv başa düşdüyümü yazmağım zəif yerlərimi gücləndirdi.
Keçdiyim imtahan mövzu olaraq Google Cloud-da məlumat emalı sistemlərinin inkişafı üçün iki nümunə tədqiqat layihəsindən istifadə etdi (29 mart 2019-cu il tarixinə bu dəyişdi). Və çoxlu seçimlə idi.
Mənə təxminən 2 saat çəkdi. Və verdiyim imtahanlardan təxminən 20% daha çətin idi.
Praktiki imtahanların dəyərini kifayət qədər ifadə edə bilmirəm.
Yenidən getsəm nəyi dəyişərdim?
Daha çox təcrübə imtahanları. Daha çox praktik bilik.
Əlbəttə ki, həmişə edə biləcəyiniz daha çox hazırlıq var.
Tövsiyə olunan tələb 3 ildən çox GCP istifadəsini bildirir. Amma məndə yox idi, ona görə də məndə olanlarla məşğul olmalı idim.
Bundan əlavə,
İmtahan martın 29-da yenilənib. Bu məqalədə təqdim olunan material hələ də yaxşı bir təməl yaradır, lakin bəzi dəyişiklikləri qeyd etmək vacibdir.
Google Cloud Professional Data Engineer imtahanının müxtəlif bölmələri ()
- Məlumatların emalı sistemlərinin dizaynı
- Strukturların və verilənlər bazalarının yaradılması və dəstəklənməsi.
- Məlumatların təhlili və maşın öyrənməsi bağlantısı
- Analiz və optimallaşdırma üçün biznes prosesinin modelləşdirilməsi
- Etibarlılığın təmin edilməsi
- Məlumatların vizuallaşdırılması və siyasət dəstəyi
- Təhlükəsizlik və uyğunluq üçün nəzərdə tutulmuşdur
Google Cloud Professional Data Engineer imtahanının müxtəlif bölmələri ()
- Məlumatların emalı sistemlərinin dizaynı
- Məlumatların emalı sistemlərinin qurulması və istismarı
- Maşın öyrənmə modellərinin işləməsi (dəyişikliklərin çoxu burada baş verdi) [YENİ]
- Qərarların keyfiyyətinin təmin edilməsi
2-ci versiya 1-ci versiyanın 2, 4, 6 və 1-cı bölmələrini 1 və 2-yə birləşdirdi. O, həmçinin 5-ci versiyadan 7 və 1-ci bölmələri 4-cü bölməyə birləşdirdi. Və 3-ci versiyanın 2-cü bölməsi bütün yeni Google Buludunu əhatə edəcək şəkildə genişləndirildi. Maşın Öyrənmə imkanları.
Bu dəyişikliklər çox yeni olduğundan, bir çox təlim materialları yenilənə bilməyib.
Bununla belə, bu məqalədəki materiallarla tanış olmaq sizə lazım olanın 70% -ni əhatə etməlidir. Mən bunu aşağıdakı suallar üzrə (imtahanın ikinci variantında təqdim olunmuş) öz araşdırmalarınızla birləşdirərdim.
- (Google tərəfindən xüsusi olaraq ML təlimi üçün hazırlanmış fərdi avadanlıq parçası)
Göründüyü kimi, imtahanın son yeniləməsi Google Cloud-da ML xüsusiyyətlərinə yönəldilib.
Yeniləmə 29/04/2019: Linux Akademiyasının kurs təlimatçısı Metyu Ulaseindən mesaj.
Sadəcə arayış üçün, biz may ayının ortalarında/axırında başlayacaq yeni kursları əks etdirmək üçün Linux Akademiyasında Data Engineer kursunu yeniləməyi planlaşdırırıq.
İmtahandan sonra
İmtahandan keçdiyiniz zaman yalnız keçid və ya uğursuz nəticə alacaqsınız. Ən azı 70% hədəf almağı məsləhət görürəm, buna görə də təcrübə imtahanlarında minimum 90% hədəflədim.
Tamamlayandan sonra siz rəsmi Google Bulud Peşəkar Məlumat Mühəndisi sertifikatı ilə birlikdə e-poçt vasitəsilə ödəniş kodu alacaqsınız. Təbrik edirik!
Siz əvəzetmə kodunu eksklüziv Google Cloud Professional Data Engineer Store-da istifadə edə bilərsiniz.). T-shirtlər, kürək çantaları və kapüşonlar var (siz ora çatana qədər stokda olmaya bilər). Kapüşonlu paltarları seçdim.
İndi siz sertifikat aldınız, bacarıq dəstinizi nümayiş etdirə bilərsiniz (rəsmi olaraq) və ən yaxşı etdiyiniz işə, tikintiyə qayıda bilərsiniz.
İki ildən sonra yenidən sertifikat almaq üçün görüşərik.
PS: Hər hansı bir sualınız varsa və ya aydınlaşdırmaq istəyirsinizsə, mənimlə əlaqə saxlaya bilərsiniz и . Haqqında Bu məqalənin video versiyası da var.
PPS: yuxarıdakı kursların hamısında və bütün gözəl müəllimlərə çox təşəkkür edirəm təhsil almaq və imtahana hazırlaşmaq üçün resurslar və vaxt təmin etmək üçün.
Kurs proqramı, onlayn formatın xüsusiyyətləri, bacarıqlar, səriştələr və təlimdən sonra məzunları gözləyən perspektivlər haqqında daha çox öyrənmək istəyən hər kəsi sizə dəvət edirik. , bu gün saat 20.00-da baş tutacaq.
Mənbə: www.habr.com