Statistos duomenimis, iki 2025 m. didžiųjų duomenų rinkos dydis išaugs iki 175 zettabaitų, palyginti su 41 cetabaitais 2019 m.). Norėdami gauti darbą šioje srityje, turite suprasti, kaip dirbti su dideliais duomenimis, saugomais debesyje. „Cloud4Y“ sudarė 12 mokamų ir nemokamų duomenų inžinerijos kursų sąrašą, kurie praplės jūsų žinias šioje srityje ir gali būti geras atspirties taškas kelyje į debesies sertifikatus.
pratarmė
Kas yra duomenų inžinierius? Tai asmuo, atsakingas už duomenų architektūros kūrimą ir priežiūrą duomenų mokslo projekte. Atsakomybė gali apimti sklandų duomenų srautą tarp serverio ir taikomosios programos užtikrinimą, naujos duomenų valdymo programinės įrangos integravimą, pagrindinių duomenų procesų tobulinimą ir duomenų konvejerių kūrimą.
Yra daugybė technologijų ir įrankių, kuriuos turi įvaldyti duomenų inžinierius, norėdamas dirbti su debesų kompiuterija, duomenų saugyklomis, ETL (išskyrimas, transformavimas, įkėlimas) ir kt. Be to, reikiamų įgūdžių skaičius nuolat auga, todėl duomenų inžinierius turi reguliariai papildyti savo žinių žinias. Mūsų sąraše yra kursai pradedantiesiems ir patyrusiems specialistams. Pasirinkite tai, kas jums tinka.
1. Duomenų inžinerijos nanolaipsnio sertifikatas ()
Sužinosite, kaip kurti duomenų modelius, kurti duomenų saugyklas ir duomenų ežerus, automatizuoti duomenų vamzdynus ir dirbti su duomenų rinkinių masyvais. Programos pabaigoje išbandysite savo naujus įgūdžius, atlikdami Capstone projektą.
Trukmė: 5 mėnesiai, 5 valandos per savaitę
Kalba: Anglų
Kaina: $ 1695
Lygis: pradinis
2. Tapkite duomenų inžinieriaus sertifikatu ()
Jie moko nuo pagrindų. Galite progresuoti žingsnis po žingsnio, naudodamiesi paskaitomis ir praktiniais projektais, kad galėtumėte tobulinti savo įgūdžius. Mokymų pabaigoje būsite pasirengę dirbti su ML ir dideliais duomenimis. Rekomenduojama išmanyti Python bent jau minimaliu lygiu.
Trukmė: 8 mėnesiai, 10 valandos per savaitę
Kalba: Anglų
Kaina😕
Lygis: pradinis
3. Tapkite duomenų inžinieriumi: įsisavinkite sąvokas ()
Lavinsite duomenų inžinerijos ir „DevOps“ įgūdžius, išmoksite kurti „Big Data“ programas, kurti duomenų srautus, apdoroti programas realiu laiku naudodami „Hazelcast“ ir duomenų bazę..
Trukmė: Priklauso nuo tavęs
Kalba: Anglų
Kaina: pirmas mėnuo – nemokamas
Lygis: pradinis
4. Duomenų inžinerijos kursai ()
Štai keletas programų, kurios supažindina jus su duomenų inžinerija ir moko kurti analitinius sprendimus. Kursai skirstomi į kategorijas pagal sudėtingumo lygį, todėl galite pasirinkti vieną pagal savo patirties lygį. Mokymų metu išmoksite naudotis Spark, Hadoop, Azure ir valdyti įmonės duomenis.
Trukmė: Priklauso nuo tavęs
Kalba: Anglų
Kaina: priklauso nuo pasirinkto kurso
Lygis: pradedantysis, vidutinis, pažengęs
5. Duomenų inžinierius ()
Šį kursą verta lankyti, jei turite patirties dirbant su Python ir norite pagilinti savo žinias bei kurti duomenų mokslininko karjerą. Sužinosite, kaip sukurti duomenų vamzdynus naudojant Python ir pandas, įkeliant didelius duomenų rinkinius į Postgres duomenų bazę po valymo, transformavimo ir patvirtinimo.
Trukmė: Priklauso nuo tavęs
Kalba: Anglų
Kaina: priklauso nuo prenumeratos formos
Lygis: pradedantysis, vidutinis
6. Duomenų inžinerija naudojant „Google Cloud“ ()
Šis kursas padės įgyti įgūdžių, kurių reikia norint sukurti didelių duomenų karjerą. Pavyzdžiui, darbas su BigQuery, Spark. Įgysite žinių, kurių reikia norint pasiruošti pramonėje pripažintam „Google Cloud Professional Data Engineer“ sertifikatui.
Trukmė: 4 mėnesiai
Kalba: Anglų
Kaina: kol kas nemokamai
Lygis: pradedantysis, vidutinis
7. Duomenų inžinerija, dideli duomenys „Google Cloud Platform“ ()
Įdomus kursas, suteikiantis praktinių žinių apie duomenų apdorojimo sistemas GCP. Užsiėmimo metu išmoksite projektuoti sistemas prieš pradedant kūrimo procesą. Be to, jūs taip pat analizuosite tiek struktūrizuotus, tiek nestruktūrizuotus duomenis, taikysite automatinį mastelio keitimą ir taikysite ML metodus informacijai išgauti.
Trukmė: 3 mėnesiai
Kalba: Anglų
Kaina: kol kas nemokamai
Lygis: pradedantysis, vidutinis
8. UC San Diego: Didžiųjų duomenų specializacija ()
Kursas pagrįstas Hadoop ir Spark sistemos naudojimu ir šių didelių duomenų metodų taikymu ML procesui. Išmoksite „Hadoop“ naudojimo su „MapReduce“, „Spark“, „Pig“ ir „Hive“ pagrindus. Sužinokite, kaip kurti nuspėjamuosius modelius ir naudoti grafikų analizę problemoms modeliuoti. Atkreipkite dėmesį, kad šis kursas nereikalauja programavimo patirties.
Trukmė: 8 mėnesiai 10 valandų per savaitę
Kalba: Anglų
Kaina: kol kas nemokamai
Lygis: pradinis
9. Didelių duomenų sutramdymas naudojant Apache Spark ir Python ()
Sužinosite, kaip naudoti srauto struktūrą ir duomenų rėmelius Spark3, ir suprasite, kaip naudoti „Amazon“ Elastic MapReduce paslaugą dirbant su „Hadoop“ grupe. Išmokite nustatyti didelių duomenų analizės problemas ir suprasti, kaip GraphX bibliotekos veikia su tinklo analize ir kaip galite naudoti MLlib.
Trukmė: Priklauso nuo tavęs
Kalba: Anglų
Kaina: nuo 800 rublių iki 149,99 USD (priklausomai nuo jūsų sėkmės)
Lygis: pradedantysis, vidutinis
10. PG programa didelių duomenų inžinerijoje ()
Šis kursas suteiks jums supratimą apie tai, kaip veikia „Aadhaar“, kaip „Facebook“ suasmenina naujienų kanalą ir kaip apskritai galima naudoti duomenų inžineriją. Pagrindinės temos bus duomenų apdorojimas (įskaitant apdorojimą realiuoju laiku), MapReduce, didelių duomenų analizė.
Trukmė: 11 mėnesiai
Kalba: Anglų
Kaina: apie 3000 USD
Lygis: pradinis
11. Profesijos duomenų mokslininkas ()
Išmoksite programuoti Python, studijuosite neuroninių tinklų Tensorflow ir Keras mokymo karkasus. Įvaldykite MongoDB, PostgreSQL, SQLite3 duomenų bazes, išmokite dirbti su Pandas, NumPy ir Matpotlib bibliotekomis.
Trukmė: 300 valandų mokymo
Kalba: rusiškai
Kaina: pirmus šešis mėnesius nemokamai, tada 3900 rublių per mėnesį
Lygis: pradinis
12. Data Engineer 7.0 ()
Gausite nuodugnų Kafka, HDFS, ClickHouse, Spark, Airflow, lambda architektūros ir kappa architektūros tyrimą. Sužinosite, kaip sujungti įrankius tarpusavyje, formuoti vamzdynus, gauti pradinį sprendimą. Norint mokytis, reikalingos minimalios Python 3 žinios.
Trukmė: 21 pamoka, 7 savaitės
Kalba: rusiškai
Kaina: nuo 60 000 iki 120 000 rublių
Lygis: pradinis
Jei norite įtraukti į sąrašą dar vieną gerą kursą, galite atsisakyti prenumeratos komentaruose arba PM. Atnaujinsime įrašą.
Ką dar galite perskaityti tinklaraštyje?
→
→
→
→
→
Užsiprenumeruokite mūsų -kanalas, kad nepraleistumėte kito straipsnio. Rašome ne dažniau kaip du kartus per savaitę ir tik darbo reikalais. Taip pat primename, kad gegužės 21 dieną 15:00 (Maskvos laiku) vyksime tema „Verslo informacijos saugumas dirbant nuotoliniu būdu“. Jei norite suprasti, kaip apsaugoti slaptą ir įmonės informaciją, kai darbuotojai dirba namuose, registruokitės!
Šaltinis: www.habr.com