12 online tečajeva o inženjeringu podataka

12 online tečajeva o inženjeringu podataka
Prema podacima iz Statista, do 2025. godine tržište velikih podataka porast će na 175 zettabajta, naspram 41 u 2019. godini (grafikon). Da biste dobili posao u ovom području, morate razumjeti kako raditi s velikim podacima pohranjenim u oblaku. Cloud4Y je pripremio popis od 12 plaćenih i besplatnih tečajeva o inženjeringu podataka koji će proširiti vaše znanje u ovom području i mogu poslužiti kao dobra polazna točka prema certifikatima u oblaku.

Predgovor

Što je specijalist za obradu podataka (data engineer)? To je osoba koja je odgovorna za izgradnju i održavanje arhitekture podataka u Data Science projektu. Njegove dužnosti mogu uključivati osiguranje neprekidnog protoka podataka između poslužitelja i aplikacije, integraciju novog softvera za upravljanje podacima, poboljšanje osnovnih procesa podataka i izradu data pipeline-a.

Postoji ogroman broj tehnologija i alata koje data engineer mora ovladati kako bi radio s облаčnim računarstvom, skladištima podataka, ETL-om (ekstrakcija, transformacija, učitavanje) i slično. A broj potrebnih vještina stalno raste, stoga data engineer mora redovito obnavljati svoje znanje. Naš popis sadrži tečajeve za početnike i iskusne stručnjake. Odaberite ono što vam najbolje odgovara.

1. Data Engineering Nanodegree Certification (Udacity)

Naučit ćete projektirati modele podataka, stvarati skladišta podataka i jezera podataka, automatizirati data pipeline i raditi s velikim skupovima podataka. Na kraju programa provjerit ćete svoje nove vještine završetkom Capstone projekta.

Trajanje: 5 mjeseci, 5 sati tjedno
Jezik: engleski
Cijena: $1695
Nivo: osnovni

2. Become a Data Engineer Certification (Coursera)

Uče se od temelja. Možete se postupno razvijati, koristeći predavanja i praktične projekte za rad na svojim vještinama. Na kraju obuke bit ćete spremni raditi s ML-om i velikim podacima. Preporučuje se poznavanje Pythona barem na minimalnoj razini.

Trajanje: 8 mjeseci, 10 sati tjedno
Jezik: engleski
Cijena😕
Nivo: osnovni

3. Become a Data Engineer: Mastering the Concepts (LinkedIn Learning)

Razvijat ćete vještine dizajniranja podataka i vještine DevOps-a, naučit ćete kako izraditi aplikacije za velike podatke, stvarati data pipeline, obraditi aplikacije u stvarnom vremenu koristeći Hazelcast i bazu podataka Hadoop.

Trajanje: ovisi o vama
Jezik: engleski
Cijena: prvi mjesec — besplatno
Nivo: osnovni

4. Data Engineering Courses (edX)

Ovdje je prikupljena serija programa koji vas upoznaju s data engineeringom i uče razvoju analitičkih rješenja. Tečajevi su podijeljeni u kategorije prema razini složenosti, tako da možete odabrati jedan prema svojem stupnju iskustva. Tijekom učenja naučit ćete koristiti Spark, Hadoop, Azure i upravljati korporativnim podacima.

Trajanje: ovisi o vama
Jezik: engleski
Cijena: ovisi o odabranom tečaju
Nivo: početni, srednji, napredni

5.       Data Engineer (DataQuest)

Ovaj tečaj vrijedi odabrati ako imate iskustva s Python-om i želite produbiti svoja znanja te izgraditi karijeru specijalista za obradu podataka. Naučit ćete graditi data pipeline-ove koristeći Python i pandas, učitavati velike skupove podataka u bazu podataka Postgres nakon čišćenja, transformacije i validacije.

Trajanje: ovisi o vama
Jezik: engleski
Cijena: ovisi o vrsti pretplate
Nivo: početni, srednji

6.   Data Engineering with Google Cloud (Coursera)

Ovaj tečaj će vam pomoći da steknete vještine potrebne za izgradnju karijere u području rada s velikim podacima. Na primjer, rad s BigQuery, Spark. Steći ćete znanja koja će vam biti korisna za pripremu za priznatu u industriji certifikaciju Google Cloud Professional Data Engineer.

Trajanje: 4 mjeseca
Jezik: engleski
Cijena: trenutno besplatno
Nivo: početni, srednji

7.   Data Engineering, Big Data on Google Cloud Platform (Coursera)

Zanimljiv tečaj koji daje praktična znanja o sustavima obrade podataka u GCP-u. Tijekom nastave saznat ćete kako dizajnirati sustave prije nego što započnete proces razvoja. Osim toga, također ćete analizirati strukturirane i nestrukturirane podatke, primijeniti automatsko skaliranje i koristiti metode ML za ekstrakciju informacija.

Trajanje: 3 mjeseca
Jezik: engleski
Cijena: trenutno besplatno
Nivo: početni, srednji

8.   UC San Diego: Big Data Specialization (Coursera)

Tečaj se temelji na korištenju infrastrukture Hadoop i Spark te primjeni ovih metoda obrade velikih podataka u procesu ML. Upoznaćete se s osnovama korištenja Hadoop-a s MapReduce-om, Spark-om, Pig-om i Hive-om. Saznat ćete kako graditi prediktivne modele i koristiti analitiku grafova za modeliranje problema. Napominjemo da za ovaj tečaj nije potrebno iskustvo s programiranjem.

Trajanje: 8 mjeseci po 10 sati tjedno
Jezik: engleski
Cijena: trenutno besplatno
Nivo: osnovni

9.   Taming Big Data With Apache Spark and Python (Udemy)

Saznat ćete kako koristiti strukturne tokove i okvire podataka u Spark3, dobit ćete uvid o tome kako koristiti Elastic MapReduce servis od Amazona za rad s vašim Hadoop klasterom. Naučit ćete identificirati probleme prilikom analize velikih podataka i razumjeti kako GraphX biblioteke rade s mrežnom analizom te kako možete koristiti MLlib.

Trajanje: ovisi o vama
Jezik: engleski
Cijena: od 800 rubalja do $149,99 (kako vam sreća posluži)
Nivo: početni, srednji

10. PG Program u Inženjerstvu Velikih Podataka (upGrad)

Ovaj tečaj će vam dati uvid u to kako funkcioniše Aadhaar, kako Facebook personalizira vijesti te kako se uopće može koristiti inženjering podataka. Ključne teme će uključivati obrada podataka (uključujući obradu u stvarnom vremenu), MapReduce, analitika velikih podataka.

Trajanje: 11 mjeseci
Jezik: engleski
Cijena: u rasponu od $3000
Nivo: osnovni

11. Profesija Data Scientist (Skillbox)

Naučit ćete programirati na Pythonu, istražiti okvire za učenje neuronskih mreža Tensorflow i Keras. Ovladat ćete bazama podataka MongoDB, PostgreSQL, SQLite3, naučit ćete raditi s knjižnicama Pandas, NumPy i Matplotlib.

Trajanje: 300 sati učenja
Jezik: ruski
Cijena: prva šest mjeseci besplatno, zatim 3900 rubalja mjesečno
Nivo: osnovni

12. Data Engineer 7.0 (New Professions Lab)

Očekuje vas duboko proučavanje Kafke, HDFS-a, ClickHouse-a, Sparka, Airflow-a, lambda arhitekture i kappa arhitekture. Naučit ćete povezivati alate jedne s drugima, formirajući pipeline-ove kako biste dobili osnovno rješenje. Za učenje je potrebno minimalno znanje Pythona 3.

Trajanje: 21 nastava, 7 tjedana
Jezik: ruski
Cijena: od 60 000 do 120 000 rubalja
Nivo: osnovni

Ako želite dodati još jedan dobar tečaj na listu, slobodno se javite u komentarima ili u privatne poruke. Dopunit ćemo objavu.

Što još korisnog možete pročitati na blogu Cloud4Y

→ Kakva je geometrija Svemira?
→ Usputne poruke na topografskim kartama Švicarske
→ Pojednostavljena i vrlo kratka povijest razvoja oblaka
→ Kako se „srušila“ banka
→ Računarski brendovi 90-ih, č.3, završni dio

Pretplatite se na naš Telegram-kanal, kako ne biste propustili novu objavu. Pišemo najviše dva puta tjedno i samo o važnim temama. Također podsjećamo da ćemo 21. maja u 15:00 (msk) održati vебинар na temu „Informacijska sigurnost poslovanja prilikom rada na daljinu“. Ako želite razumjeti kako zaštititi osjetljive i korporativne informacije prilikom rada zaposlenika iz kuće – registrujte se!

Izvor: habr.com

Kupite pouzdan hosting za web stranice s DDoS zaštitom, VPS VDS servere 🔥 Kupite pouzdan hosting za web stranice s DDoS zaštitom, VPS VDS servere | ProHoster