
Prema podacima iz Statista, do 2025. godine tržište velikih podataka porast će na 175 zettabajta, naspram 41 u 2019. godini (). Da biste dobili posao u ovom području, morate razumjeti kako raditi s velikim podacima pohranjenim u oblaku. Cloud4Y je pripremio popis od 12 plaćenih i besplatnih tečajeva o inženjeringu podataka koji će proširiti vaše znanje u ovom području i mogu poslužiti kao dobra polazna točka prema certifikatima u oblaku.
Predgovor
Što je specijalist za obradu podataka (data engineer)? To je osoba koja je odgovorna za izgradnju i održavanje arhitekture podataka u Data Science projektu. Njegove dužnosti mogu uključivati osiguranje neprekidnog protoka podataka između poslužitelja i aplikacije, integraciju novog softvera za upravljanje podacima, poboljšanje osnovnih procesa podataka i izradu data pipeline-a.
Postoji ogroman broj tehnologija i alata koje data engineer mora ovladati kako bi radio s облаčnim računarstvom, skladištima podataka, ETL-om (ekstrakcija, transformacija, učitavanje) i slično. A broj potrebnih vještina stalno raste, stoga data engineer mora redovito obnavljati svoje znanje. Naš popis sadrži tečajeve za početnike i iskusne stručnjake. Odaberite ono što vam najbolje odgovara.
1. Data Engineering Nanodegree Certification ()
Naučit ćete projektirati modele podataka, stvarati skladišta podataka i jezera podataka, automatizirati data pipeline i raditi s velikim skupovima podataka. Na kraju programa provjerit ćete svoje nove vještine završetkom Capstone projekta.
Trajanje: 5 mjeseci, 5 sati tjedno
Jezik: engleski
Cijena: $1695
Nivo: osnovni
2. Become a Data Engineer Certification ()
Uče se od temelja. Možete se postupno razvijati, koristeći predavanja i praktične projekte za rad na svojim vještinama. Na kraju obuke bit ćete spremni raditi s ML-om i velikim podacima. Preporučuje se poznavanje Pythona barem na minimalnoj razini.
Trajanje: 8 mjeseci, 10 sati tjedno
Jezik: engleski
Cijena😕
Nivo: osnovni
3. Become a Data Engineer: Mastering the Concepts ()
Razvijat ćete vještine dizajniranja podataka i vještine DevOps-a, naučit ćete kako izraditi aplikacije za velike podatke, stvarati data pipeline, obraditi aplikacije u stvarnom vremenu koristeći Hazelcast i bazu podataka.
Trajanje: ovisi o vama
Jezik: engleski
Cijena: prvi mjesec — besplatno
Nivo: osnovni
4. Data Engineering Courses ()
Ovdje je prikupljena serija programa koji vas upoznaju s data engineeringom i uče razvoju analitičkih rješenja. Tečajevi su podijeljeni u kategorije prema razini složenosti, tako da možete odabrati jedan prema svojem stupnju iskustva. Tijekom učenja naučit ćete koristiti Spark, Hadoop, Azure i upravljati korporativnim podacima.
Trajanje: ovisi o vama
Jezik: engleski
Cijena: ovisi o odabranom tečaju
Nivo: početni, srednji, napredni
5. Data Engineer ()
Ovaj tečaj vrijedi odabrati ako imate iskustva s Python-om i želite produbiti svoja znanja te izgraditi karijeru specijalista za obradu podataka. Naučit ćete graditi data pipeline-ove koristeći Python i pandas, učitavati velike skupove podataka u bazu podataka Postgres nakon čišćenja, transformacije i validacije.
Trajanje: ovisi o vama
Jezik: engleski
Cijena: ovisi o vrsti pretplate
Nivo: početni, srednji
6. Data Engineering with Google Cloud ()
Ovaj tečaj će vam pomoći da steknete vještine potrebne za izgradnju karijere u području rada s velikim podacima. Na primjer, rad s BigQuery, Spark. Steći ćete znanja koja će vam biti korisna za pripremu za priznatu u industriji certifikaciju Google Cloud Professional Data Engineer.
Trajanje: 4 mjeseca
Jezik: engleski
Cijena: trenutno besplatno
Nivo: početni, srednji
7. Data Engineering, Big Data on Google Cloud Platform ()
Zanimljiv tečaj koji daje praktična znanja o sustavima obrade podataka u GCP-u. Tijekom nastave saznat ćete kako dizajnirati sustave prije nego što započnete proces razvoja. Osim toga, također ćete analizirati strukturirane i nestrukturirane podatke, primijeniti automatsko skaliranje i koristiti metode ML za ekstrakciju informacija.
Trajanje: 3 mjeseca
Jezik: engleski
Cijena: trenutno besplatno
Nivo: početni, srednji
8. UC San Diego: Big Data Specialization ()
Tečaj se temelji na korištenju infrastrukture Hadoop i Spark te primjeni ovih metoda obrade velikih podataka u procesu ML. Upoznaćete se s osnovama korištenja Hadoop-a s MapReduce-om, Spark-om, Pig-om i Hive-om. Saznat ćete kako graditi prediktivne modele i koristiti analitiku grafova za modeliranje problema. Napominjemo da za ovaj tečaj nije potrebno iskustvo s programiranjem.
Trajanje: 8 mjeseci po 10 sati tjedno
Jezik: engleski
Cijena: trenutno besplatno
Nivo: osnovni
9. Taming Big Data With Apache Spark and Python ()
Saznat ćete kako koristiti strukturne tokove i okvire podataka u Spark3, dobit ćete uvid o tome kako koristiti Elastic MapReduce servis od Amazona za rad s vašim Hadoop klasterom. Naučit ćete identificirati probleme prilikom analize velikih podataka i razumjeti kako GraphX biblioteke rade s mrežnom analizom te kako možete koristiti MLlib.
Trajanje: ovisi o vama
Jezik: engleski
Cijena: od 800 rubalja do $149,99 (kako vam sreća posluži)
Nivo: početni, srednji
10. PG Program u Inženjerstvu Velikih Podataka ()
Ovaj tečaj će vam dati uvid u to kako funkcioniše Aadhaar, kako Facebook personalizira vijesti te kako se uopće može koristiti inženjering podataka. Ključne teme će uključivati obrada podataka (uključujući obradu u stvarnom vremenu), MapReduce, analitika velikih podataka.
Trajanje: 11 mjeseci
Jezik: engleski
Cijena: u rasponu od $3000
Nivo: osnovni
11. Profesija Data Scientist ()
Naučit ćete programirati na Pythonu, istražiti okvire za učenje neuronskih mreža Tensorflow i Keras. Ovladat ćete bazama podataka MongoDB, PostgreSQL, SQLite3, naučit ćete raditi s knjižnicama Pandas, NumPy i Matplotlib.
Trajanje: 300 sati učenja
Jezik: ruski
Cijena: prva šest mjeseci besplatno, zatim 3900 rubalja mjesečno
Nivo: osnovni
12. Data Engineer 7.0 ()
Očekuje vas duboko proučavanje Kafke, HDFS-a, ClickHouse-a, Sparka, Airflow-a, lambda arhitekture i kappa arhitekture. Naučit ćete povezivati alate jedne s drugima, formirajući pipeline-ove kako biste dobili osnovno rješenje. Za učenje je potrebno minimalno znanje Pythona 3.
Trajanje: 21 nastava, 7 tjedana
Jezik: ruski
Cijena: od 60 000 do 120 000 rubalja
Nivo: osnovni
Ako želite dodati još jedan dobar tečaj na listu, slobodno se javite u komentarima ili u privatne poruke. Dopunit ćemo objavu.
Što još korisnog možete pročitati na blogu
→
→
→
→
→
Pretplatite se na naš -kanal, kako ne biste propustili novu objavu. Pišemo najviše dva puta tjedno i samo o važnim temama. Također podsjećamo da ćemo 21. maja u 15:00 (msk) održati na temu „Informacijska sigurnost poslovanja prilikom rada na daljinu“. Ako želite razumjeti kako zaštititi osjetljive i korporativne informacije prilikom rada zaposlenika iz kuće – registrujte se!
Izvor: habr.com
