Χωρίς την προτεινόμενη 3ετή πρακτική εμπειρία
Πριν από την έναρξη του μαθήματος , θέλουμε να μοιραστούμε μαζί σας μια μετάφραση μιας πολύ ενδιαφέρουσας ιστορίας, η οποία σίγουρα θα είναι χρήσιμη στους μελλοντικούς μηχανικούς δεδομένων. Πηγαίνω!
Hoodie από την Google: φορέστε. Σοβαρή εργασιακή έκφραση προσώπου: παρόν. Φωτογραφία από την έκδοση βίντεο αυτού του άρθρου στο .
Σημείωση. Αυτό το άρθρο καλύπτει την εξέταση πιστοποίησης Google Cloud Professional Data Engineer έως τις 29 Μαρτίου 2019. Έχουν γίνει κάποιες αλλαγές από αυτήν την ημερομηνία. Τα έχω συμπεριλάβει στην ενότητα Extras.
Λοιπόν, θέλετε να πάρετε μια νέα κουκούλα όπως στο εξώφυλλό μου; Ή σκέφτεσαι να πάρεις πιστοποίηση; και αναρωτιέμαι πώς να το κάνω.
Τους τελευταίους μήνες, παρακολούθησα μαθήματα μαζί με τη χρήση του Google Cloud για να προετοιμαστώ για τις εξετάσεις Professional Data Engineer. Μετά προσπάθησα να το περάσω και πέρασα. Και λίγες εβδομάδες αργότερα έφτασε η κουκούλα μου. Το πιστοποιητικό έφτασε πιο γρήγορα.
Αυτό το άρθρο θα αναφέρει μερικά πράγματα που ίσως θέλετε να μάθετε και τα βήματα που έκανα για να αποκτήσω την πιστοποίηση Google Cloud Professional Data Engineer.
Γιατί θα θέλατε να πιστοποιηθείτε ως Επαγγελματίας Μηχανικός Δεδομένων του Google Cloud;
Τα δεδομένα είναι παντού. Και το να γνωρίζεις πώς να δημιουργείς συστήματα που να μπορούν να επεξεργάζονται και να χρησιμοποιούν δεδομένα είναι περιζήτητο. Το Google Cloud παρέχει την υποδομή για τη δημιουργία αυτών των συστημάτων.
Μπορεί να έχετε ήδη τις δεξιότητες να χρησιμοποιήσετε το Google Cloud, αλλά πώς θα το αποδείξετε σε έναν μελλοντικό εργοδότη ή πελάτη; Υπάρχουν δύο τρόποι: χαρτοφυλάκιο έργων ή πιστοποίηση.
Το πιστοποιητικό λέει στους υποψήφιους πελάτες και εργοδότες, "Έχω τις δεξιότητες και έχω καταβάλει προσπάθεια για να διαπιστευθώ".
Μια σύντομη περιγραφή από την Google το συνοψίζει.
Επιδείξτε την ικανότητά σας να σχεδιάζετε και να δημιουργείτε συστήματα δεδομένων και να δημιουργείτε μοντέλα μηχανικής εκμάθησης στην πλατφόρμα Google Cloud.
Εάν δεν διαθέτετε ήδη τις δεξιότητες, η μετάβαση στα σεμινάρια πιστοποίησης σημαίνει ότι θα μάθετε τα πάντα για το πώς να δημιουργείτε συστήματα δεδομένων παγκόσμιας κλάσης στο Google Cloud.
Ποιος θα ήθελε να πιστοποιηθεί ως Επαγγελματίας Μηχανικός Δεδομένων του Google Cloud;
Έχετε δει τους αριθμούς. Το σύννεφο μεγαλώνει. Είναι ήδη εδώ και δεν πάει πουθενά. Αν δεν έχετε δει ακόμα τους αριθμούς, πιστέψτε με, το σύννεφο μεγαλώνει.
Είτε είστε ήδη Data Scientist, Data Engineer, Data Analyst, Machine Learning Engineer είτε αναζητάτε μια ευκαιρία καριέρας στον κόσμο των δεδομένων, η πιστοποίηση Google Cloud Professional Data Engineer είναι για εσάς.
Η δυνατότητα χρήσης του cloud γίνεται απαίτηση για οποιαδήποτε θέση με επίκεντρο τα δεδομένα.
Χρειάζεστε μια πιστοποίηση για να είστε καλός μηχανικός δεδομένων/επιστήμονας δεδομένων/μηχανικός εκμάθησης μηχανών;
Όχι.
Μπορείτε ακόμα να χρησιμοποιήσετε το Google Cloud για λύσεις δεδομένων χωρίς πιστοποιητικό.
Το πιστοποιητικό είναι μόνο μία από τις μεθόδους για την επικύρωση των υπαρχουσών δεξιοτήτων.
Πόσο κοστίζει;
Το κόστος εξέτασης είναι 200 $. Εάν αποτύχετε, θα πρέπει να πληρώσετε ξανά για να προσπαθήσετε ξανά.
Μπορεί να υπάρχουν έξοδα που σχετίζονται με τα προπαρασκευαστικά μαθήματα και τη χρήση της ίδιας της πλατφόρμας.
Οι χρεώσεις πλατφόρμας είναι χρεώσεις για τη χρήση υπηρεσιών Google Cloud. Εάν είστε σοφιστικέ χρήστης, το γνωρίζετε ήδη. Εάν όχι, και μόλις ξεκινάτε με τους οδηγούς που καλύπτονται σε αυτό το άρθρο, μπορείτε να δημιουργήσετε έναν νέο λογαριασμό Google Cloud και να παραμείνετε εντός των προσφορών της Google 300 $ κατά την εγγραφή σας.
Θα φτάσουμε στο κόστος του μαθήματος σε ένα δευτερόλεπτο.
Πόσο καιρό ισχύει η πιστοποίηση;
2 χρόνια. Μετά από αυτό, θα πρέπει να ξαναδώσετε την εξέταση.
Και δεδομένου ότι το Google Cloud εξελίσσεται καθημερινά, είναι πιθανό να αλλάξει αυτό που απαιτείται για ένα πιστοποιητικό (όπως ανακάλυψα, είχε ήδη αλλάξει από τη στιγμή που άρχισα να γράφω αυτό το άρθρο).
Τι χρειάζεστε για να προετοιμαστείτε για τις εξετάσεις;
Η Google συνιστά 3+ χρόνια εμπειρίας στον κλάδο και 1+ έτος ανάπτυξης και διαχείρισης λύσεων με χρήση GCP για πιστοποίηση επαγγελματικού επιπέδου.
Δεν είχα τίποτα από τα παραπάνω.
Με βάση την 6μηνη σχετική εμπειρία. Για να καλύψω το έλλειμμα, χρησιμοποίησα έναν συνδυασμό διαδικτυακών πόρων εκμάθησης.
Τι μαθήματα έχω παρακολουθήσει;
Εάν είστε σαν εμένα και δεν έχετε τις προτεινόμενες απαιτήσεις, μπορείτε να παρακολουθήσετε μερικά από τα παρακάτω μαθήματα για να βελτιώσετε τις δεξιότητές σας.
Τα παρακάτω μαθήματα είναι αυτά που χρησιμοποίησα για την προετοιμασία για την πιστοποίηση. Παρατίθενται με σειρά συμπλήρωσης.
Έχω αναφέρει το κόστος, το χρονοδιάγραμμα και τη χρησιμότητα της εξέτασης πιστοποίησης για όλους.
Μερικοί από τους σπουδαίους διαδικτυακούς πόρους που χρησιμοποίησα για να βελτιώσω τις δεξιότητές μου πριν από τις εξετάσεις. Για να: , и .
Κόστος: 49 $ το μήνα (μετά από δωρεάν δοκιμή 7 ημερών)
ώρα: 1–2 μήνες, 10+ ώρες την εβδομάδα
Χρησιμότητα: 8 / 10
δημιουργήθηκε σε συνεργασία με το Google Cloud.
Αναλύεται σε πέντε επιμέρους μαθήματα, καθένα από τα οποία διαρκεί περίπου 10 ώρες την εβδομάδα του χρόνου μελέτης.
Εάν είστε νέος στην επεξεργασία δεδομένων Google Cloud, αυτή η εξειδίκευση θα σας μεταφέρει από το επίπεδο 0 στο επίπεδο 1. Θα ολοκληρώσετε μια σειρά από πρακτικές ασκήσεις χρησιμοποιώντας μια επαναληπτική πλατφόρμα που ονομάζεται QwikLabs. Πριν από αυτό, θα πραγματοποιηθούν διαλέξεις από επαγγελματίες του Google Cloud σχετικά με τον τρόπο χρήσης διαφόρων υπηρεσιών όπως το Google BigQuery, το Cloud Dataproc, το Dataflow και το Bigtable.
Κόστος: δωρεάν
ώρα: 1 εβδομάδα, 4-6 ώρες
Χρησιμότητα: 4 / 10
Μην λαμβάνετε μια χαμηλή βαθμολογία χρησιμότητας ως ένδειξη της αναξιότητας του μαθήματος. Αυτό απέχει πολύ από το να είναι αλήθεια. Ο μόνος λόγος που παίρνει χαμηλότερη βαθμολογία είναι επειδή δεν επικεντρώνεται στην πιστοποίηση ενός επαγγελματία μηχανικού δεδομένων (όπως υποδηλώνει το όνομα).
Μετά την ολοκλήρωση της εξειδίκευσης του Coursera, παρακολούθησα αυτό το μάθημα ως ανανέωση επειδή χρησιμοποίησα μόνο το Google Cloud για μερικές εξειδικευμένες περιπτώσεις χρήσης.
Εάν προέρχεστε από άλλο πάροχο cloud ή δεν έχετε χρησιμοποιήσει ποτέ το Google Cloud στο παρελθόν, ίσως θελήσετε να παρακολουθήσετε αυτό το μάθημα. Αυτή είναι μια εξαιρετική εισαγωγή στην πλατφόρμα Google Cloud γενικά.
Κόστος: 49 $ το μήνα (μετά από δωρεάν δοκιμή 7 ημερών)
ώρα: 1-4 εβδομάδες, 4+ ώρες την εβδομάδα
Χρησιμότητα: 10 / 10
Μετά την ολοκλήρωση της εξέτασης και τον προβληματισμό σχετικά με τα μαθήματα που παρακολούθησα, το πιο χρήσιμο ήταν .
Βίντεο επίσης (ένας εξαιρετικός δωρεάν πόρος εκμάθησης που συνοδεύει το μάθημα) και οι πρακτικές εξετάσεις έκαναν αυτό το μάθημα έναν από τους καλύτερους πόρους εκμάθησης που έχω χρησιμοποιήσει ποτέ.
Το πρότεινα ακόμη και ως αναφορά σε κάποιες σημειώσεις του Slack για την ομάδα μετά την εξέταση.
Σημειώσεις στο Slack
- Ορισμένα πράγματα στην εξέταση δεν ήταν σε εξετάσεις στο Linux Academy, στο Cloud Guru ή στο Google Cloud Practice (αναμενόμενο)
- 1 ερώτηση με ένα γράφημα σημείων δεδομένων, σχετικά με την εξίσωση που πρέπει να τα ομαδοποιήσετε (για παράδειγμα, cos(X) ή X² + Y²)
- Είναι απαραίτητο να γνωρίζετε τις διαφορές μεταξύ Dataflow, Dataproc, Datastore, Bigtable, BigQuery, Pub/Sub και πώς μπορούν να χρησιμοποιηθούν.
- Τα δύο παραδείγματα εργασίας έρευνας στην εξέταση ήταν ακριβώς τα ίδια με αυτά της πρακτικής άσκησης, αν και δεν αναφέρθηκα καθόλου σε αυτές τις μελέτες κατά τη διάρκεια της εξέτασης (οι ερωτήσεις έδωσαν επαρκή εικόνα).
- Η γνώση της βασικής σύνταξης ερωτημάτων SQL είναι πολύ χρήσιμη, ειδικά για ερωτήσεις BigQuery.
- Οι πρακτικές εξετάσεις που παρέχονται από το Linux Academy και το GCP μοιάζουν πολύ στο στυλ με τις ερωτήσεις των εξετάσεων και θα επεξεργαστώ καθεμία από αυτές πολλές φορές και θα τις χρησιμοποιήσω για να ανακαλύψω τις αδυναμίες σας.
- Μια μικρή συμβουλή για βοήθεια με το Dataproc:dataproc ο κρόκος και Hadoop ο ελέφαντας σχεδιάζει να Σπινθήρας μια φωτιά και μάγειρας Κυψέλη of Χοίροι«{Κροκόδειλος dataproc και ελέφαντας Hadoop σχεδιάζει να βάλει φωτιά (Σπινθήρας - σπινθήρα, ανάβει φωτιά - κάνε φωτιά) και μαγειρεύει ένα σμήνος (Κυψέλη) γουρούνια (Χοίρος)} (Η Dataproc ασχολείται με Hadoop, Spark, Hive και Pig)
- «Ροή δεδομένων είναι ένα ρέον Πλάτος του φωτός" {Ροή δεδομένων αυτή είναι η τρέχουσα δέσμη (Πλάτος) light} (Η ροή δεδομένων ασχολείται με το Apache Beam)
- "Ολοι σε όλο τον κόσμο μπορεί να σχετίζεται με α καλοφτιαγμένο ACID πλυμένο Κλειδί" {Οποιοσδήποτε Παγκόσμιος θα μπορούσε να αντιμετωπίσει το καθαρό οξύ (ΟΞΥ) με συμπαγές κλειδί (Spanner)} (Το Cloud Spanner είναι μια βάση δεδομένων που έχει σχεδιαστεί για να ανεβάζει το cloud από την αρχή, είναι συμβατή με ACID και είναι διαθέσιμη παγκοσμίως)
- Μπορεί να είναι χρήσιμο να γνωρίζετε τα ονόματα των κλασικών σχεσιακών και μη σχεσιακών βάσεων δεδομένων (για παράδειγμα, MongoDB, Cassandra)
- Οι ρόλοι IAM διαφέρουν ελαφρώς για κάθε υπηρεσία, αλλά είναι χρήσιμο να κατανοήσετε πώς να διαχωρίσετε τους χρήστες από τη δυνατότητα να δουν δεδομένα χωρίς να αφαιρέσετε τη δυνατότητα σχεδιασμού ροών εργασιών (π.χ. ο ρόλος "Εργαζόμενος ροής δεδομένων" μπορεί να σχεδιάζει ροές εργασίας αλλά να μην βλέπει δεδομένα)
Αυτό μάλλον είναι αρκετό για τώρα. Τα χιλιόμετρα πιθανότατα θα διαφέρουν από εξέταση σε εξέταση. Το μάθημα Linux Academy θα σας δώσει το 80% της γνώσης.
Κόστος: δωρεάν
ώρα: 1-2 ώρες
Χρησιμότητα: 5 / 10
Έχουν προταθεί στα φόρουμ του Cloud Guru. Πολλά από αυτά δεν σχετίζονταν με την πιστοποίηση Professional Data Engineer, ωστόσο έχω επιλέξει μερικά που είναι.
Ορισμένες υπηρεσίες μπορεί να φαίνονται περίπλοκες κατά τη διάρκεια του μαθήματος, επομένως ήταν ωραίο να ακούσουμε πώς περιγράφεται μια συγκεκριμένη υπηρεσία σε ένα λεπτό.
Κόστος: 49 $ ανά πιστοποιητικό ή δωρεάν (χωρίς πιστοποιητικό)
ώρα: 1-2 εβδομάδες, 6+ ώρες την εβδομάδα
Χρησιμότητα: N / A
Βρήκα αυτόν τον πόρο την ημέρα πριν προγραμματιστεί η εξέτασή μου. Δεν το τελείωσα λόγω χρονικών περιορισμών, εξ ου και η έλλειψη βαθμολογίας χρησιμότητας.
Ωστόσο, από τη σελίδα επισκόπησης του μαθήματος, φαίνεται σαν ένας εξαιρετικός πόρος για να συγκεντρώσετε όλα όσα έχετε μάθει σχετικά με το Google Cloud Data Engineering και να τονίσετε τυχόν αδυναμίες.
Πρότεινα αυτό το μάθημα ως πηγή σε έναν από τους συναδέλφους μου που προετοιμάζεται για πιστοποίηση.
Κόστος: δωρεάν
ώρα: ΟΧΙ
Χρησιμότητα: ΟΧΙ
Αυτή ήταν μια άλλη πηγή που έπεσα πάνω μου μετά την εξέταση. Κατά τη γνώμη μου, είναι περιεκτικό, αλλά ταυτόχρονα συνοπτικό. Επιπλέον, είναι δωρεάν. Μπορεί να χρησιμοποιηθεί για ανάγνωση μεταξύ πρακτικών εξετάσεων ή ακόμα και μετά την πιστοποίηση για να εμβαθύνει τις γνώσεις.
Τι έκανα μετά το μάθημα;
Καθώς πλησίαζα στο τέλος των μαθημάτων μου, έκλεισα την εξέταση με ειδοποίηση μιας εβδομάδας.
Το να έχετε μια προθεσμία είναι ένα μεγάλο κίνητρο για να ενισχύσετε αυτά που έχετε μάθει.
Έδωσα επανειλημμένα τις πρακτικές εξετάσεις από το Linux Academy και το Google Cloud μέχρι που κατάφερα να τις ολοκληρώνω με 95%+ ακρίβεια κάθε φορά.
Πέτυχε την πρακτική εξέταση του Linux Academy με πάνω από 90% για πρώτη φορά.
Οι δοκιμές από κάθε πλατφόρμα είναι παρόμοιες, αλλά ανακάλυψα ότι το να περάσω από τις ερωτήσεις που έκανα συνεχώς λάθος και να καταγράψω γιατί τις παρεξήγησα, βοήθησαν να βελτιωθούν τα αδύνατα σημεία μου.
Η εξέταση που έδωσα χρησιμοποίησε ως θέμα δύο δείγματα ερευνητικών έργων για την ανάπτυξη συστημάτων επεξεργασίας δεδομένων στο Google Cloud (από τις 29 Μαρτίου 2019, αυτό άλλαξε). Και ήταν με πολλαπλές επιλογές σε όλη τη διάρκεια.
Μου πήρε περίπου 2 ώρες. Και ήταν περίπου 20% πιο δύσκολη από οποιαδήποτε από τις εξετάσεις που έδωσα.
Δεν μπορώ να εκφράσω αρκετά την αξία των πρακτικών εξετάσεων.
Τι θα άλλαζα αν ξαναπήγαινα;
Περισσότερες πρακτικές εξετάσεις. Περισσότερες πρακτικές γνώσεις.
Φυσικά, υπάρχει πάντα περισσότερη προετοιμασία που θα μπορούσατε να κάνετε.
Η συνιστώμενη απαίτηση αναφέρει περισσότερα από 3 χρόνια χρήσης GCP. Αλλά δεν το είχα, οπότε έπρεπε να ασχοληθώ με αυτό που είχα.
επιπλέον
Η εξέταση ενημερώθηκε στις 29 Μαρτίου. Το υλικό που παρουσιάζεται σε αυτό το άρθρο εξακολουθεί να παρέχει μια καλή βάση, αλλά είναι σημαντικό να σημειώσετε ορισμένες αλλαγές.
Διάφορες ενότητες της εξέτασης Google Cloud Professional Data Engineer ()
- Σχεδιασμός συστημάτων επεξεργασίας δεδομένων
- Δημιουργία και υποστήριξη δομών και βάσεων δεδομένων.
- Ανάλυση δεδομένων και σύνδεση μηχανικής μάθησης
- Μοντελοποίηση επιχειρηματικών διαδικασιών για ανάλυση και βελτιστοποίηση
- Διασφάλιση αξιοπιστίας
- Οπτικοποίηση δεδομένων και υποστήριξη πολιτικής
- Σχεδιασμένο για ασφάλεια και συμμόρφωση
Διάφορες ενότητες της εξέτασης Google Cloud Professional Data Engineer ()
- Σχεδιασμός συστημάτων επεξεργασίας δεδομένων
- Κατασκευή και λειτουργία συστημάτων επεξεργασίας δεδομένων
- Λειτουργία μοντέλων μηχανικής μάθησης (οι περισσότερες αλλαγές έγιναν εδώ) [ΝΕΟΣ]
- Διασφάλιση της ποιότητας των λύσεων
Η έκδοση 2 συγχώνευσε τις ενότητες 1, 2, 4 και 6 της έκδοσης 1 σε 1 και 2. Επίσης, συγχώνευσε τις ενότητες 5 και 7 από την έκδοση 1 στην ενότητα 4. Και η ενότητα 3 της έκδοσης 2 επεκτάθηκε για να καλύψει όλο το νέο Google Cloud Δυνατότητες μηχανικής μάθησης.
Επειδή αυτές οι αλλαγές είναι τόσο πρόσφατες, πολλά από τα εκπαιδευτικά υλικά δεν μπόρεσαν να ενημερωθούν.
Ωστόσο, η εξοικείωση με τα υλικά σε αυτό το άρθρο θα πρέπει να είναι αρκετή για να καλύψει το 70% αυτού που χρειάζεστε. Θα το συνδύασα με κάποια δική σας έρευνα για τις παρακάτω ερωτήσεις (που παρουσιάστηκαν στη δεύτερη έκδοση της εξέτασης).
- (ένα προσαρμοσμένο κομμάτι εξοπλισμού σχεδιασμένο από την Google ειδικά για εκπαίδευση ML)
Όπως μπορείτε να δείτε, η τελευταία ενημέρωση της εξέτασης επικεντρώθηκε στις λειτουργίες ML στο Google Cloud.
Ενημέρωση 29/04/2019: Ένα μήνυμα από τον εκπαιδευτή μαθημάτων της Linux Academy Matthew Ulasein.
Απλώς για αναφορά, σχεδιάζουμε να ενημερώσουμε το μάθημα Data Engineer στο Linux Academy για να αντικατοπτρίζει τα νέα μαθήματα που θα ξεκινήσουν κάποια στιγμή στα μέσα/τέλη Μαΐου.
Μετά την εξέταση
Όταν περάσετε την εξέταση, θα λάβετε μόνο ένα αποτέλεσμα επιτυχίας ή αποτυχίας. Σας συμβουλεύω να στοχεύσετε τουλάχιστον στο 70%, έτσι στόχευα τουλάχιστον στο 90% στις πρακτικές εξετάσεις.
Μόλις περάσει, θα λάβετε έναν κωδικό εξαργύρωσης μέσω email μαζί με την επίσημη πιστοποίηση Google Cloud Professional Data Engineer. Συγχαρητήρια!
Μπορείτε να χρησιμοποιήσετε τον κωδικό εξαργύρωσης στο αποκλειστικό Google Cloud Professional Data Engineer Store, το οποίο είναι γεμάτο swag (). Υπάρχουν μπλουζάκια, σακίδια πλάτης και κουκούλες (ίσως να μην είναι σε απόθεμα μέχρι να φτάσετε εκεί). Επέλεξα κουκούλα.
Τώρα είστε πιστοποιημένοι, μπορείτε να επιδείξετε (επίσημα) τις ικανότητές σας και να επιστρέψετε σε αυτό που κάνετε καλύτερα, την οικοδόμηση.
Τα λέμε σε δύο χρόνια για να ξαναπιστοποιηθούμε.
PS: Εάν έχετε οποιεσδήποτε ερωτήσεις ή θέλετε διευκρινίσεις, μπορείτε να επικοινωνήσετε μαζί μου στο и . επί Υπάρχει επίσης μια έκδοση βίντεο αυτού του άρθρου.
PPS: πολλές ευχαριστίες σε όλους τους υπέροχους καθηγητές σε όλα τα παραπάνω μαθήματα και για την παροχή πόρων και χρόνου για μελέτη και προετοιμασία για τις εξετάσεις.
Και όλοι όσοι θέλουν να μάθουν περισσότερα για το πρόγραμμα μαθημάτων, τα χαρακτηριστικά της διαδικτυακής μορφής, τις δεξιότητες, τις ικανότητες και τις προοπτικές που περιμένουν τους αποφοίτους μετά την εκπαίδευση, σας προσκαλούμε να , που θα πραγματοποιηθεί σήμερα στις 20.00.
Πηγή: www.habr.com