Laŭ Statista, ĝis 2025 la grandeco de la granda datuma merkato kreskos al 175 zettabajtoj kompare kun 41 en 2019 (). Por akiri laboron en ĉi tiu kampo, vi devas kompreni kiel labori kun grandaj datumoj stokitaj en la nubo. Cloud4Y kompilis liston de 12 pagitaj kaj senpagaj kursoj pri datuma inĝenierado, kiuj vastigos viajn sciojn en la kampo kaj povas esti bona deirpunkto sur via vojo al nubaj atestadoj.
Antaŭparolo
Kio estas datuma inĝeniero? Ĉi tiu estas la persono, kiu respondecas pri kreado kaj prizorgado de la datuma arkitekturo en projekto pri Data Science. Respondecoj povas inkluzivi certigi glatan datumfluon inter la servilo kaj aplikaĵo, integri novan datumadministradsoftvaron, plibonigante subestajn datumprocezojn kaj kreante datumduktojn.
Estas grandega nombro da teknologioj kaj iloj, kiujn datuma inĝeniero devas majstri por labori kun nuba komputado, datumstokejoj, ETL (eltiro, transformo, ŝarĝo), ktp. Cetere, la nombro de bezonataj kapabloj kreskas la tutan tempon, do datuma inĝeniero devas regule replenigi siajn sciojn. Nia listo inkluzivas kursojn por komencantoj kaj spertaj profesiuloj. Elektu tion, kio konvenas al vi.
1. Atestado pri Nanograda Inĝenierado de Datumoj ()
Vi lernos kiel desegni datummodelojn, krei datumajn stokejojn kaj datumajn lagojn, aŭtomatigi datumajn duktojn kaj labori kun aroj de datumaj aroj. Ĉe la fino de la programo, vi provos viajn novajn kapablojn kompletigante Capstone-projekton.
daŭro: 5 monatoj, 5 horoj semajne
Lingvo: angla
Kosto: $ 1695
nivelo: komenca
2. Fariĝu Atestilo pri Datuma Inĝeniero ()
Ili instruas de la bazoj. Vi povas progresi paŝon post paŝo, uzante prelegojn kaj praktikajn projektojn por labori pri viaj kapabloj. Antaŭ la fino de la trejnado, vi estos preta labori kun ML kaj grandaj datumoj. Oni rekomendas koni Python almenaŭ je minimuma nivelo.
daŭro: 8 monatoj, 10 horoj semajne
Lingvo: angla
Kosto😕
nivelo: komenca
3. Fariĝu Datuma Inĝeniero: Majstrado de la Konceptoj ()
Vi disvolvos datumojn-inĝenieristikon kaj DevOps-kapablojn, lernos kiel krei Big Data-aplikaĵojn, krei datumduktojn, prilaboros aplikojn en reala tempo uzante Hazelcast kaj datumbazon..
daŭro: Dependas de vi
Lingvo: angla
Kosto: unua monato - senpage
nivelo: komenca
4. Kursoj pri Datuma Inĝenierado ()
Jen serio de programoj, kiuj prezentas vin al datuma inĝenierado kaj instruas vin kiel evoluigi analizajn solvojn. Kursoj estas dividitaj en kategoriojn laŭ malfacilecnivelo, do vi povas elekti unu laŭ via spertnivelo. Dum la trejnado vi lernos uzi Spark, Hadoop, Azure kaj administri kompaniajn datumojn.
daŭro: Dependas de vi
Lingvo: angla
Kosto: dependas de la elektita kurso
nivelo: komencanto, meza, progresinta
5. Datuma Inĝeniero ()
Ĉi tiu kurso valoras preni se vi havas sperton kun Python kaj volas profundigi viajn sciojn kaj konstrui karieron kiel datuma sciencisto. Vi lernos kiel konstrui datumduktojn uzante Python kaj pandojn, ŝarĝante grandajn datumajn arojn en Postgres-datumbazon post purigado, transformado kaj validigo.
daŭro: Dependas de vi
Lingvo: angla
Kosto: dependas de la abonformularo
nivelo: komencanto, meza
6. Datuma Inĝenierado kun Google Cloud ()
Ĉi tiu kurso helpos vin akiri la kapablojn, kiujn vi bezonas por konstrui karieron en grandaj datumoj. Ekzemple, laborante kun BigQuery, Spark. Vi akiros la sciojn, kiujn vi bezonas por prepari por la industrio-agnoskita atestilo pri Google Cloud Professional Data Engineer.
daŭro: 4 monatoj
Lingvo: angla
Kosto: senpage nuntempe
nivelo: komencanto, meza
7. Datuma Inĝenierado, Granda Datumo sur Google Cloud Platform ()
Interesa kurso, kiu disponigas praktikan scion pri datumtraktadsistemoj en GCP. Dum la klaso, vi lernos kiel desegni sistemojn antaŭ ol komenci la disvolvan procezon. Krome, vi ankaŭ analizos ambaŭ strukturitajn kaj nestrukturitajn datumojn, aplikos aŭtomatan skalon kaj aplikos ML-teknikojn por ĉerpi informojn.
daŭro: 3 monatoj
Lingvo: angla
Kosto: senpage nuntempe
nivelo: komencanto, meza
8. UC San Diego: Granda Datuma Specialiĝo ()
La kurso baziĝas sur uzado de la kadro Hadoop kaj Spark kaj aplikado de ĉi tiuj grandaj datumteknikoj al la ML-procezo. Vi lernos la bazojn pri uzado de Hadoop kun MapReduce, Spark, Pig kaj Hive. Lernu kiel konstrui prognozajn modelojn kaj uzi grafikan analizon por modeligi problemojn. Bonvolu noti, ke ĉi tiu kurso ne postulas ajnan programan sperton.
daŭro: 8 monatoj 10 horoj semajne
Lingvo: angla
Kosto: senpage nuntempe
nivelo: komenca
9. Malsovaĝigi Grandajn Datumojn Kun Apache Spark kaj Python ()
Vi lernos kiel uzi la fluan strukturon kaj datumkadrojn en Spark3, kaj komprenos kiel uzi la Elastic MapReduce-servon de Amazon por labori kun via Hadoop-areto. Lernu identigi problemojn en analizo de grandaj datumoj kaj komprenu kiel GraphX bibliotekoj funkcias kun reta analizo kaj kiel vi povas uzi MLlib.
daŭro: Dependas de vi
Lingvo: angla
Kosto: de 800 rubloj ĝis $149,99 (depende de via sorto)
nivelo: komencanto, meza
10. PG-Programo en Big Data Engineering ()
Ĉi tiu kurso donos al vi komprenon pri kiel Aadhaar funkcias, kiel Facebook personigas la novaĵfluon, kaj kiel Datuma Inĝenierado povas esti uzata ĝenerale. Ŝlosilaj temoj estos prilaborado de datumoj (inkluzive de realtempa prilaborado), MapReduce, analizo de grandaj datumoj.
daŭro: 11 monatoj
Lingvo: angla
Kosto: ĉirkaŭ $3000
nivelo: komenca
11. Profesia Datuma Sciencisto ()
Vi lernos programi en Python, studos la kadrojn por trejnado de neŭralaj retoj Tensorflow kaj Keras. Majstri la datumbazojn MongoDB, PostgreSQL, SQLite3, lernu labori kun la bibliotekoj Pandas, NumPy kaj Matpotlib.
daŭro: 300 horoj da trejnado
Lingvo: Rusa
Kosto: unuaj ses monatoj senpage, poste 3900 rubloj monate
nivelo: komenca
12. Datuma Inĝeniero 7.0 ()
Vi ricevos profundan studon pri Kafka, HDFS, ClickHouse, Spark, Airflow, lambda arkitekturo kaj kappa arkitekturo. Vi lernos kiel ligi ilojn unu al la alia, formante duktoj, akirante bazlinian solvon. Por studi, necesas minimuma scio pri Python 3.
daŭro: 21 lecionoj, 7 semajnoj
Lingvo: Rusa
Kosto: de 60 ĝis 000 rubloj
nivelo: komenca
Se vi volas aldoni alian bonan kurson al la listo, vi povas malaboni en la komentoj aŭ en PM. Ni ĝisdatigos la afiŝon.
Kion alian vi povas legi en la blogo?
→
→
→
→
→
Abonu nian -kanalo por ne maltrafi la sekvan artikolon. Ni skribas ne pli ol dufoje semajne kaj nur pri komerco. Ni memorigas ankaŭ, ke la 21-an de majo je la 15:00 (moskva tempo) ni okazigos pri la temo "Komerca informa sekureco kiam oni laboras malproksime." Se vi volas kompreni kiel protekti sentemajn kaj kompaniajn informojn kiam dungitoj laboras hejme, registriĝu!
fonto: www.habr.com