12 tieŔsaistes kursi datu inženierijā

12 tieŔsaistes kursi datu inženierijā
Saskaņā ar Statista datiem lÄ«dz 2025. gadam lielo datu tirgus apjoms pieaugs lÄ«dz 175 zetabaitiem, salÄ«dzinot ar 41 cetabaitiem 2019. gadā (grafiku). Lai iegÅ«tu darbu Å”ajā jomā, ir jāsaprot, kā strādāt ar lielajiem datiem, kas glabājas mākonÄ«. Cloud4Y ir izveidojis sarakstu ar 12 maksas un bezmaksas datu inženierijas kursiem, kas paplaÅ”inās jÅ«su zināŔanas Å”ajā jomā un var bÅ«t labs sākumpunkts jÅ«su ceļā uz mākoņsertifikāciju.

priekŔvārds

Kas ir datu inženieris? Å Ä« ir persona, kas ir atbildÄ«ga par datu arhitektÅ«ras izveidi un uzturÄ“Å”anu datu zinātnes projektā. Pienākumos var ietilpt vienmērÄ«gas datu plÅ«smas nodroÅ”ināŔana starp serveri un lietojumprogrammu, jaunas datu pārvaldÄ«bas programmatÅ«ras integrÄ“Å”ana, pamatā esoÅ”o datu procesu uzlaboÅ”ana un datu cauruļvadu izveide.

Ir milzÄ«gs skaits tehnoloÄ£iju un rÄ«ku, kas datu inženierim ir jāapgÅ«st, lai strādātu ar mākoņdatoÅ”anu, datu noliktavām, ETL (izgÅ«Å”ana, transformÄ“Å”ana, ielāde) utt. Turklāt visu laiku pieaug nepiecieÅ”amo prasmju skaits, tāpēc datu inženierim regulāri jāpapildina savas zināŔanas. MÅ«su sarakstā ir kursi iesācējiem un pieredzējuÅ”iem profesionāļiem. Izvēlieties sev piemērotāko.

1. Datu inženierijas nanopakāpju sertifikācija (Udacity vietnē)

Jūs uzzināsiet, kā veidot datu modeļus, izveidot datu noliktavas un datu ezerus, automatizēt datu cauruļvadus un strādāt ar datu kopu masīviem. Programmas beigās jūs pārbaudīsiet savas jaunās prasmes, izpildot Capstone projektu.

Ilgums: 5 mēneÅ”i, 5 stundas nedēļā
Valoda: Angļu
Cena: $ 1695
Līmenis: iniciālis

2. Kļūstiet par datu inženiera sertifikātu (Coursera)

Viņi māca no pamatiem. Varat soli pa solim progresēt, izmantojot lekcijas un praktiskus projektus, lai uzlabotu savas prasmes. Apmācības beigās būsiet gatavs darbam ar ML un lielajiem datiem. Ieteicams zināt Python vismaz minimālā līmenī.

Ilgums: 8 mēneÅ”i, 10 stundas nedēļā
Valoda: Angļu
CenašŸ˜•
Līmenis: iniciālis

3. Kļūstiet par datu inženieri: apgÅ«stiet jēdzienus (LinkedIn mācÄ«Å”anās)

Jūs attīstīsiet datu inženierijas un DevOps prasmes, uzzināsiet, kā izveidot Big Data lietojumprogrammas, izveidot datu cauruļvadus, apstrādāt lietojumprogrammas reāllaikā, izmantojot Hazelcast un datu bāzi Hadoop.

Ilgums: Atkarīgs no tevis
Valoda: Angļu
Cena: pirmais mēnesis - bez maksas
Līmenis: iniciālis

4. Datu inženierijas kursi (EDX)

Å eit ir virkne programmu, kas iepazÄ«stina jÅ«s ar datu inženieriju un māca izstrādāt analÄ«tiskos risinājumus. Kursi ir sadalÄ«ti kategorijās atkarÄ«bā no grÅ«tÄ«bas pakāpes, lai jÅ«s varētu izvēlēties vienu atbilstoÅ”i jÅ«su pieredzes lÄ«menim. ApmācÄ«bu laikā iemācÄ«sies lietot Spark, Hadoop, Azure un pārvaldÄ«t korporatÄ«vos datus.

Ilgums: Atkarīgs no tevis
Valoda: Angļu
Cena: atkarīgs no izvēlētā kursa
Līmenis: iesācējs, vidējais līmenis, progresīvs

5. Datu inženieris (DataQuest)

Å o kursu ir vērts apmeklēt, ja jums ir pieredze darbā ar Python un vēlaties padziļināt savas zināŔanas un veidot karjeru kā datu zinātnieks. JÅ«s uzzināsit, kā izveidot datu cauruļvadus, izmantojot Python un pandas, ielādējot lielas datu kopas Postgres datu bāzē pēc tÄ«rÄ«Å”anas, pārveidoÅ”anas un apstiprināŔanas.

Ilgums: Atkarīgs no tevis
Valoda: Angļu
Cena: atkarīgs no abonēŔanas formas
Līmenis: iesācējs, vidējais

6. Datu inženierija, izmantojot Google Cloud (Coursera)

Å is kurss palÄ«dzēs jums iegÅ«t prasmes, kas nepiecieÅ”amas, lai veidotu karjeru lielo datu jomā. Piemēram, strādājot ar BigQuery, Spark. JÅ«s iegÅ«sit zināŔanas, kas nepiecieÅ”amas, lai sagatavotos nozarē atzÄ«tajam Google Cloud Professional Data Engineer sertifikātam.

Ilgums: 4 mēneÅ”i
Valoda: Angļu
Cena: pagaidām bezmaksas
Līmenis: iesācējs, vidējais

7. Datu inženierija, lielie dati Google mākoņa platformā (Coursera)

Interesants kurss, kas sniedz praktiskas zināŔanas par datu apstrādes sistēmām GCP. NodarbÄ«bas laikā jÅ«s uzzināsiet, kā projektēt sistēmas pirms izstrādes procesa uzsākÅ”anas. Turklāt jÅ«s arÄ« analizēsit gan strukturētus, gan nestrukturētus datus, lietosiet automātisko mērogoÅ”anu un lietosiet ML metodes, lai iegÅ«tu informāciju.

Ilgums: 3 mēneÅ”i
Valoda: Angļu
Cena: pagaidām bezmaksas
Līmenis: iesācējs, vidējais

8. UC Sandjego: lielo datu specializācija (Coursera)

Kursa pamatā ir Hadoop un Spark ietvara izmantoÅ”ana un Å”o lielo datu metožu pielietoÅ”ana ML procesā. JÅ«s apgÅ«sit Hadoop lietoÅ”anas pamatus ar MapReduce, Spark, Pig un Hive. Uzziniet, kā izveidot paredzamos modeļus un izmantot grafiku analÄ«zi, lai modelētu problēmas. LÅ«dzu, ņemiet vērā, ka Å”im kursam nav nepiecieÅ”ama programmÄ“Å”anas pieredze.

Ilgums: 8 mēneÅ”i, 10 stundas nedēļā
Valoda: Angļu
Cena: pagaidām bezmaksas
Līmenis: iniciālis

9. Lielo datu pieradināŔana, izmantojot Apache Spark un Python (Udemy)

JÅ«s uzzināsit, kā Spark3 izmantot straumes struktÅ«ru un datu rāmjus, un iegÅ«sit izpratni par to, kā izmantot Amazon Elastic MapReduce pakalpojumu, lai strādātu ar savu Hadoop klasteru. Uzziniet, kā identificēt problēmas lielo datu analÄ«zē un saprast, kā GraphX bibliotēkas darbojas ar tÄ«kla analÄ«zi un kā varat izmantot MLlib.

Ilgums: Atkarīgs no tevis
Valoda: Angļu
Cena: no 800 rubļiem līdz 149,99 USD (atkarībā no jūsu veiksmes)
Līmenis: iesācējs, vidējais

10. PG programma lielo datu inženierijā (jauninājums)

Šis kurss sniegs jums izpratni par to, kā darbojas Aadhaar, kā Facebook personalizē ziņu plūsmu un kā kopumā var izmantot datu inženieriju. Galvenās tēmas būs datu apstrāde (ieskaitot apstrādi reāllaikā), MapReduce, lielo datu analītika.

Ilgums: 11 mēneÅ”i
Valoda: Angļu
Cena: aptuveni 3000 USD
Līmenis: iniciālis

11. Profesija datu zinātnieks (Prasmju kaste)

Jūs iemācīsities programmēt Python, izpētīsiet neironu tīklu Tensorflow un Keras apmācības ietvarus. Apgūstiet datu bāzes MongoDB, PostgreSQL, SQLite3, iemācieties strādāt ar Pandas, NumPy un Matpotlib bibliotēkām.

Ilgums: 300 mācību stundas
Valoda: krieviski
Cena: pirmie seÅ”i mēneÅ”i bez maksas, pēc tam 3900 rubļu mēnesÄ«
Līmenis: iniciālis

12. Datu inženieris 7.0 (Jauno profesiju laboratorija)

JÅ«s saņemsiet padziļinātu pētÄ«jumu par Kafka, HDFS, ClickHouse, Spark, Airflow, lambda arhitektÅ«ru un kappa arhitektÅ«ru. JÅ«s uzzināsiet, kā savienot instrumentus savā starpā, veidojot cauruļvadus, iegÅ«stot bāzes risinājumu. Lai mācÄ«tos, ir nepiecieÅ”amas minimālas Python 3 zināŔanas.

Ilgums: 21 nodarbība, 7 nedēļas
Valoda: krieviski
Cena: no 60 000 līdz 120 000 rubļu
Līmenis: iniciālis

Ja vēlies sarakstam pievienot vēl kādu labu kursu, vari atrakstīties komentāros vai PM. Mēs atjaunināsim ziņu.

Ko vēl var lasīt emuārā? Cloud4Y

ā†’ Kāda ir Visuma Ä£eometrija?
ā†’ Lieldienu olas Å veices topogrāfiskajās kartēs
ā†’ VienkārÅ”ota un ļoti Ä«sa "mākoņu" attÄ«stÄ«bas vēsture
ā†’ Kā banka cieta neveiksmi?
ā†’ 90. gadu datoru zÄ«moli, 3. daļa, fināls

Abonējiet mÅ«su Telegram-kanāls, lai nepalaistu garām nākamo rakstu. Mēs rakstām ne biežāk kā divas reizes nedēļā un tikai darba kārtÄ«bā. Tāpat atgādinām, ka 21.maijā plkst.15:00 (pēc Maskavas laika) rÄ«kosim vebinārs par tēmu ā€œUzņēmējdarbÄ«bas informācijas droŔība, strādājot attālinātiā€. Ja vēlaties saprast, kā aizsargāt sensitÄ«vu un korporatÄ«vu informāciju, darbiniekiem strādājot no mājām, reÄ£istrējieties!

Avots: www.habr.com

Pievieno komentāru