SaskaÅÄ ar Statista datiem lÄ«dz 2025. gadam lielo datu tirgus apjoms pieaugs lÄ«dz 175 zetabaitiem, salÄ«dzinot ar 41 cetabaitiem 2019. gadÄ (
priekÅ”vÄrds
Kas ir datu inženieris? Å Ä« ir persona, kas ir atbildÄ«ga par datu arhitektÅ«ras izveidi un uzturÄÅ”anu datu zinÄtnes projektÄ. PienÄkumos var ietilpt vienmÄrÄ«gas datu plÅ«smas nodroÅ”inÄÅ”ana starp serveri un lietojumprogrammu, jaunas datu pÄrvaldÄ«bas programmatÅ«ras integrÄÅ”ana, pamatÄ esoÅ”o datu procesu uzlaboÅ”ana un datu cauruļvadu izveide.
Ir milzÄ«gs skaits tehnoloÄ£iju un rÄ«ku, kas datu inženierim ir jÄapgÅ«st, lai strÄdÄtu ar mÄkoÅdatoÅ”anu, datu noliktavÄm, ETL (izgÅ«Å”ana, transformÄÅ”ana, ielÄde) utt. TurklÄt visu laiku pieaug nepiecieÅ”amo prasmju skaits, tÄpÄc datu inženierim regulÄri jÄpapildina savas zinÄÅ”anas. MÅ«su sarakstÄ ir kursi iesÄcÄjiem un pieredzÄjuÅ”iem profesionÄļiem. IzvÄlieties sev piemÄrotÄko.
1. Datu inženierijas nanopakÄpju sertifikÄcija (
JÅ«s uzzinÄsiet, kÄ veidot datu modeļus, izveidot datu noliktavas un datu ezerus, automatizÄt datu cauruļvadus un strÄdÄt ar datu kopu masÄ«viem. Programmas beigÄs jÅ«s pÄrbaudÄ«siet savas jaunÄs prasmes, izpildot Capstone projektu.
Ilgums: 5 mÄneÅ”i, 5 stundas nedÄļÄ
Valoda: Angļu
Cena: $ 1695
LÄ«menis: iniciÄlis
2. Kļūstiet par datu inženiera sertifikÄtu (
ViÅi mÄca no pamatiem. Varat soli pa solim progresÄt, izmantojot lekcijas un praktiskus projektus, lai uzlabotu savas prasmes. ApmÄcÄ«bas beigÄs bÅ«siet gatavs darbam ar ML un lielajiem datiem. Ieteicams zinÄt Python vismaz minimÄlÄ lÄ«menÄ«.
Ilgums: 8 mÄneÅ”i, 10 stundas nedÄļÄ
Valoda: Angļu
Cenaš
LÄ«menis: iniciÄlis
3. Kļūstiet par datu inženieri: apgÅ«stiet jÄdzienus (
JÅ«s attÄ«stÄ«siet datu inženierijas un DevOps prasmes, uzzinÄsiet, kÄ izveidot Big Data lietojumprogrammas, izveidot datu cauruļvadus, apstrÄdÄt lietojumprogrammas reÄllaikÄ, izmantojot Hazelcast un datu bÄzi
Ilgums: Atkarīgs no tevis
Valoda: Angļu
Cena: pirmais mÄnesis - bez maksas
LÄ«menis: iniciÄlis
4. Datu inženierijas kursi (
Å eit ir virkne programmu, kas iepazÄ«stina jÅ«s ar datu inženieriju un mÄca izstrÄdÄt analÄ«tiskos risinÄjumus. Kursi ir sadalÄ«ti kategorijÄs atkarÄ«bÄ no grÅ«tÄ«bas pakÄpes, lai jÅ«s varÄtu izvÄlÄties vienu atbilstoÅ”i jÅ«su pieredzes lÄ«menim. ApmÄcÄ«bu laikÄ iemÄcÄ«sies lietot Spark, Hadoop, Azure un pÄrvaldÄ«t korporatÄ«vos datus.
Ilgums: Atkarīgs no tevis
Valoda: Angļu
Cena: atkarÄ«gs no izvÄlÄtÄ kursa
LÄ«menis: iesÄcÄjs, vidÄjais lÄ«menis, progresÄ«vs
5. Datu inženieris (
Å o kursu ir vÄrts apmeklÄt, ja jums ir pieredze darbÄ ar Python un vÄlaties padziļinÄt savas zinÄÅ”anas un veidot karjeru kÄ datu zinÄtnieks. JÅ«s uzzinÄsit, kÄ izveidot datu cauruļvadus, izmantojot Python un pandas, ielÄdÄjot lielas datu kopas Postgres datu bÄzÄ pÄc tÄ«rÄ«Å”anas, pÄrveidoÅ”anas un apstiprinÄÅ”anas.
Ilgums: Atkarīgs no tevis
Valoda: Angļu
Cena: atkarÄ«gs no abonÄÅ”anas formas
LÄ«menis: iesÄcÄjs, vidÄjais
6. Datu inženierija, izmantojot Google Cloud (
Å is kurss palÄ«dzÄs jums iegÅ«t prasmes, kas nepiecieÅ”amas, lai veidotu karjeru lielo datu jomÄ. PiemÄram, strÄdÄjot ar BigQuery, Spark. JÅ«s iegÅ«sit zinÄÅ”anas, kas nepiecieÅ”amas, lai sagatavotos nozarÄ atzÄ«tajam Google Cloud Professional Data Engineer sertifikÄtam.
Ilgums: 4 mÄneÅ”i
Valoda: Angļu
Cena: pagaidÄm bezmaksas
LÄ«menis: iesÄcÄjs, vidÄjais
7. Datu inženierija, lielie dati Google mÄkoÅa platformÄ (
Interesants kurss, kas sniedz praktiskas zinÄÅ”anas par datu apstrÄdes sistÄmÄm GCP. NodarbÄ«bas laikÄ jÅ«s uzzinÄsiet, kÄ projektÄt sistÄmas pirms izstrÄdes procesa uzsÄkÅ”anas. TurklÄt jÅ«s arÄ« analizÄsit gan strukturÄtus, gan nestrukturÄtus datus, lietosiet automÄtisko mÄrogoÅ”anu un lietosiet ML metodes, lai iegÅ«tu informÄciju.
Ilgums: 3 mÄneÅ”i
Valoda: Angļu
Cena: pagaidÄm bezmaksas
LÄ«menis: iesÄcÄjs, vidÄjais
8. UC Sandjego: lielo datu specializÄcija (
Kursa pamatÄ ir Hadoop un Spark ietvara izmantoÅ”ana un Å”o lielo datu metožu pielietoÅ”ana ML procesÄ. JÅ«s apgÅ«sit Hadoop lietoÅ”anas pamatus ar MapReduce, Spark, Pig un Hive. Uzziniet, kÄ izveidot paredzamos modeļus un izmantot grafiku analÄ«zi, lai modelÄtu problÄmas. LÅ«dzu, Åemiet vÄrÄ, ka Å”im kursam nav nepiecieÅ”ama programmÄÅ”anas pieredze.
Ilgums: 8 mÄneÅ”i, 10 stundas nedÄļÄ
Valoda: Angļu
Cena: pagaidÄm bezmaksas
LÄ«menis: iniciÄlis
9. Lielo datu pieradinÄÅ”ana, izmantojot Apache Spark un Python (
JÅ«s uzzinÄsit, kÄ Spark3 izmantot straumes struktÅ«ru un datu rÄmjus, un iegÅ«sit izpratni par to, kÄ izmantot Amazon Elastic MapReduce pakalpojumu, lai strÄdÄtu ar savu Hadoop klasteru. Uzziniet, kÄ identificÄt problÄmas lielo datu analÄ«zÄ un saprast, kÄ GraphX bibliotÄkas darbojas ar tÄ«kla analÄ«zi un kÄ varat izmantot MLlib.
Ilgums: Atkarīgs no tevis
Valoda: Angļu
Cena: no 800 rubļiem lÄ«dz 149,99 USD (atkarÄ«bÄ no jÅ«su veiksmes)
LÄ«menis: iesÄcÄjs, vidÄjais
10. PG programma lielo datu inženierijÄ (
Å is kurss sniegs jums izpratni par to, kÄ darbojas Aadhaar, kÄ Facebook personalizÄ ziÅu plÅ«smu un kÄ kopumÄ var izmantot datu inženieriju. GalvenÄs tÄmas bÅ«s datu apstrÄde (ieskaitot apstrÄdi reÄllaikÄ), MapReduce, lielo datu analÄ«tika.
Ilgums: 11 mÄneÅ”i
Valoda: Angļu
Cena: aptuveni 3000 USD
LÄ«menis: iniciÄlis
11. Profesija datu zinÄtnieks (
JÅ«s iemÄcÄ«sities programmÄt Python, izpÄtÄ«siet neironu tÄ«klu Tensorflow un Keras apmÄcÄ«bas ietvarus. ApgÅ«stiet datu bÄzes MongoDB, PostgreSQL, SQLite3, iemÄcieties strÄdÄt ar Pandas, NumPy un Matpotlib bibliotÄkÄm.
Ilgums: 300 mÄcÄ«bu stundas
Valoda: krieviski
Cena: pirmie seÅ”i mÄneÅ”i bez maksas, pÄc tam 3900 rubļu mÄnesÄ«
LÄ«menis: iniciÄlis
12. Datu inženieris 7.0 (
JÅ«s saÅemsiet padziļinÄtu pÄtÄ«jumu par Kafka, HDFS, ClickHouse, Spark, Airflow, lambda arhitektÅ«ru un kappa arhitektÅ«ru. JÅ«s uzzinÄsiet, kÄ savienot instrumentus savÄ starpÄ, veidojot cauruļvadus, iegÅ«stot bÄzes risinÄjumu. Lai mÄcÄ«tos, ir nepiecieÅ”amas minimÄlas Python 3 zinÄÅ”anas.
Ilgums: 21 nodarbÄ«ba, 7 nedÄļas
Valoda: krieviski
Cena: no 60 000 līdz 120 000 rubļu
LÄ«menis: iniciÄlis
Ja vÄlies sarakstam pievienot vÄl kÄdu labu kursu, vari atrakstÄ«ties komentÄros vai PM. MÄs atjauninÄsim ziÅu.
Ko vÄl var lasÄ«t emuÄrÄ?
ā
ā
ā
ā
ā
AbonÄjiet mÅ«su
Avots: www.habr.com