Skont Statista, sal-2025 id-daqs tas-suq tal-big data se jikber għal 175 zettabytes meta mqabbel ma' 41 fl-2019 (
Daħla
X'inhu inġinier tad-dejta? Din hija l-persuna li hija responsabbli għall-ħolqien u ż-żamma tal-arkitettura tad-dejta fi proġett tax-Xjenza tad-Data. Ir-responsabbiltajiet jistgħu jinkludu l-iżgurar ta' fluss ta' dejta bla xkiel bejn is-server u l-applikazzjoni, l-integrazzjoni ta' softwer ġdid għall-ġestjoni tad-dejta, it-titjib tal-proċessi ta' dejta sottostanti, u l-ħolqien ta' pipelines tad-dejta.
Hemm għadd kbir ta' teknoloġiji u għodod li inġinier tad-dejta jrid jegħleb sabiex jaħdem bil-cloud computing, imħażen tad-dejta, ETL (estrazzjoni, trasformazzjoni, tagħbija), eċċ. Barra minn hekk, in-numru ta 'ħiliet meħtieġa qed jikber il-ħin kollu, għalhekk inġinier tad-dejta jeħtieġ li regolarment jimla l-għarfien tal-għarfien tiegħu. Il-lista tagħna tinkludi korsijiet għal dawk li jibdew u professjonisti b'esperjenza. Agħżel dak li jaqbel għalik.
1. Ċertifikazzjoni tan-Nanodegree tal-Inġinerija tad-Data (
Se titgħallem kif tfassal mudelli tad-dejta, toħloq imħażen tad-dejta u lagi tad-dejta, tawtomatizza pipelines tad-dejta u taħdem ma 'arrays ta' settijiet ta' dejta. Fl-aħħar tal-programm, inti se tittestja l-ħiliet ġodda tiegħek billi tlesti proġett Capstone.
It-tul: 5 xhur, 5 sigħat fil-ġimgħa
Lingwa: Ingliż
Prezz: $ 1695
Livell: inizjali
2. Issir Ċertifikazzjoni ta' Inġinier tad-Data (
Jgħallmu mill-baŜi. Tista' timxi pass pass, billi tuża lekċers u proġetti prattiċi biex taħdem fuq il-ħiliet tiegħek. Sa tmiem it-taħriġ, tkun lest biex taħdem bl-ML u l-big data. Huwa rakkomandat li tkun taf Python mill-inqas f'livell minimu.
It-tul: 8 xhur, 10 sigħat fil-ġimgħa
Lingwa: Ingliż
Prezz😕
Livell: inizjali
3. Issir Inġinier tad-Data: Ikkontrolla l-Kunċetti (
Int se tiżviluppa l-inġinerija tad-dejta u l-ħiliet DevOps, titgħallem kif toħloq applikazzjonijiet ta’ Big Data, toħloq pipelines tad-dejta, tipproċessa applikazzjonijiet f’ħin reali billi tuża Hazelcast u database
It-tul: Jiddependi minnek
Lingwa: Ingliż
Prezz: l-ewwel xahar - b'xejn
Livell: inizjali
4. Korsijiet tal-Inġinerija tad-Data (
Hawnhekk hawn sensiela ta' programmi li jintroduċuk fl-inġinerija tad-dejta u jgħallmu kif tiżviluppa soluzzjonijiet analitiċi. Il-korsijiet huma maqsuma f'kategoriji bbażati fuq il-livell ta 'diffikultà, sabiex tkun tista' tagħżel waħda skont il-livell tal-esperjenza tiegħek. Matul it-taħriġ int se titgħallem tuża Spark, Hadoop, Azure u timmaniġġja d-dejta korporattiva.
It-tul: Jiddependi minnek
Lingwa: Ingliż
Prezz: jiddependi fuq il-kors magħżul
Livell: Bidu, intermedju, avvanzat
5. Inġinier tad-Data (
Dan il-kors ta’ min jieħu jekk għandek esperjenza ma’ Python u trid tapprofondixxi l-għarfien tiegħek u tibni karriera bħala xjenzat tad-dejta. Int se titgħallem kif tibni pipelines tad-dejta billi tuża Python u pandas, tagħbija settijiet kbar ta 'dejta f'database Postgres wara t-tindif, it-trasformazzjoni u l-validazzjoni.
It-tul: Jiddependi minnek
Lingwa: Ingliż
Prezz: jiddependi fuq il-formola ta' abbonament
Livell: Bidu, intermedju
6. Inġinerija tad-Data b'Google Cloud (
Dan il-kors jgħinek tikseb il-ħiliet li għandek bżonn biex tibni karriera fil-big data. Per eżempju, taħdem ma 'BigQuery, Spark. Int ser tikseb l-għarfien li għandek bżonn biex tipprepara għaċ-ċertifikazzjoni ta' Google Cloud Professional Data Engineer rikonoxxuta mill-industrija.
It-tul: 4 xhur
Lingwa: Ingliż
Prezz: b'xejn għalissa
Livell: Bidu, intermedju
7. Inġinerija tad-Data, Big Data fuq Google Cloud Platform (
Kors interessanti li jipprovdi għarfien prattiku tas-sistemi tal-ipproċessar tad-dejta fil-GCP. Matul il-klassi, titgħallem kif tfassal sistemi qabel tibda l-proċess ta 'żvilupp. Barra minn hekk, se tanalizza wkoll data kemm strutturata kif ukoll mhux strutturata, tapplika awto-skala, u tapplika tekniki ML biex tiġbed l-informazzjoni.
It-tul: 3 xhur
Lingwa: Ingliż
Prezz: b'xejn għalissa
Livell: Bidu, intermedju
8. UC San Diego: Speċjalizzazzjoni Big Data (
Il-kors huwa bbażat fuq l-użu tal-qafas Hadoop u Spark u l-applikazzjoni ta 'dawn it-tekniki ta' big data għall-proċess ML. Int ser titgħallem l-affarijiet bażiċi tal-użu ta 'Hadoop ma' MapReduce, Spark, Pig, u Hive. Tgħallem kif tibni mudelli ta' tbassir u uża l-analiżi tal-grafika biex timmudella l-problemi. Jekk jogħġbok innota li dan il-kors ma jeħtieġ l-ebda esperjenza ta’ programmazzjoni.
It-tul: 8 xhur 10 sigħat fil-ġimgħa
Lingwa: Ingliż
Prezz: b'xejn għalissa
Livell: inizjali
9. Taming Big Data B'Apache Spark u Python (
Int ser titgħallem kif tuża l-istruttura tan-nixxiegħa u l-frejms tad-dejta fi Spark3, u tikseb fehim ta 'kif tuża s-servizz Elastic MapReduce ta' Amazon biex taħdem mal-cluster Hadoop tiegħek. Tgħallem tidentifika problemi fl-analiżi tad-dejta kbira u tifhem kif il-libreriji GraphX jaħdmu mal-analiżi tan-netwerk u kif tista 'tuża MLlib.
It-tul: Jiddependi minnek
Lingwa: Ingliż
Prezz: minn 800 rublu sa $149,99 (skond ix-xorti tiegħek)
Livell: Bidu, intermedju
10. PG Program in Big Data Engineering (
Dan il-kors jagħtik fehim ta’ kif jaħdem Aadhaar, kif Facebook jippersonalizza l-għalf tal-aħbarijiet, u kif l-Inġinerija tad-Data tista’ tintuża b’mod ġenerali. Suġġetti ewlenin se jkunu l-ipproċessar tad-dejta (inkluż l-ipproċessar f’ħin reali), MapReduce, l-analiżi tal-big data.
It-tul: 11 xahar
Lingwa: Ingliż
Prezz: madwar $3000
Livell: inizjali
11. Xjentist tad-Data tal-Professjoni (
Int se titgħallem tipprogramma f'Python, tistudja l-oqfsa għat-taħriġ tan-netwerks newrali Tensorflow u Keras. Ikkontrolla d-databases MongoDB, PostgreSQL, SQLite3, tgħallem taħdem mal-libreriji Pandas, NumPy u Matpotlib.
It-tul: 300 siegħa ta' taħriġ
Lingwa: Russu
Prezz: l-ewwel sitt xhur b'xejn, imbagħad 3900 rublu kull xahar
Livell: inizjali
12. Inġinier tad-Data 7.0 (
Inti ser tirċievi studju fil-fond ta 'Kafka, HDFS, ClickHouse, Spark, Airflow, arkitettura lambda u arkitettura kappa. Int titgħallem kif tikkonnettja għodod ma 'xulxin, tifforma pipelines, tikseb soluzzjoni bażika. Biex tistudja, huwa meħtieġ għarfien minimu ta 'Python 3.
It-tul: 21 lezzjoni, 7 ġimgħat
Lingwa: Russu
Prezz: minn 60 sa 000 rublu
Livell: inizjali
Jekk trid iżżid kors tajjeb ieħor mal-lista, tista’ tneħħi l-abbonament fil-kummenti jew f’PM. Se naġġornaw il-post.
X'iktar tista' taqra fuq il-blog?
→
→
→
→
→
Abbona għal tagħna
Sors: www.habr.com