Ifølge Statista vil markedet for big data vokse til 175 zettabytes i 2025 sammenlignet med 41 i 2019 (). For at få et job inden for dette område er det nødvendigt at forstå, hvordan man arbejder med store data, der opbevares i skyen. Cloud4Y har forberedt en liste med 12 betalte og gratis kurser i datainženørarbejde, som vil udvide din viden inden for dette område og kan være et godt udgangspunkt for cloud-certificeringer.
Forord
Hvad er en databehandler (data engineer)? Det er en person, der er ansvarlig for at oprette og vedligeholde datainfrastrukturen i Data Science-projekter. Hans eller hendes opgaver kan omfatte at sikre en kontinuerlig strøm af data mellem serveren og applikationen, integrere ny software til datahåndtering, forbedre grundlæggende dataprocesser og oprette datakanaler.
Der findes et stort antal teknologier og værktøjer, som en databehandler skal mestre for at arbejde med cloud computing, datalagre, ETL (udtrækning, transformation, indlæsning) osv. Desuden vokser antallet af krævede færdigheder hele tiden, hvilket betyder, at databehandlere skal opdatere deres viden regelmæssigt. Vores liste indeholder kurser til både begyndere og erfarne fagfolk. Vælg det, der passer til dig.
1. Data Engineering Nanodegree Certification ()
Du vil lære at designe datamodeller, oprette datalagre og datalakes, automatisere datakanaler og arbejde med datasæt. Ved afslutningen af programmet vil du kunne teste dine nye færdigheder ved at afslutte et Capstone-projekt.
Varighed: 5 måneder, 5 timer om ugen
Sprog: engelsk
Pris: $1695
Niveau: begynderniveau
2. Bliv en databehandler certificering ()
Lærer fra bunden. Du kan udvikle dig trin for trin ved hjælp af forelæsninger og praktiske projekter til at arbejde på dine færdigheder. Ved afslutningen af uddannelsen vil du være klar til at arbejde med ML og big data. Det anbefales at kende Python på mindst et grundlæggende niveau.
Varighed: 8 måneder, 10 timer om ugen
Sprog: engelsk
Pris😕
Niveau: begynderniveau
3. Bliv en databehandler: Mestre koncepter ()
Du vil udvikle færdigheder i datadesign og DevOps-færdigheder, lære at oprette applikationer til Big Data, oprette datakanaler og behandle applikationer i realtid ved hjælp af Hazelcast og databaser..
Varighed: afhænger af dig
Sprog: engelsk
Pris: første måned — gratis
Niveau: begynderniveau
4. Datainženørkurser ()
Her er samlet en række programmer, der introducerer dig til data engineering og lærer dig at udvikle analytiske løsninger. Kurserne er opdelt i kategorier afhængig af sværhedsgrad, så du kan vælge et i overensstemmelse med dit erfaringsniveau. Undervejs vil du lære at bruge Spark, Hadoop, Azure og administrere virksomhedsdata.
Varighed: afhænger af dig
Sprog: engelsk
Pris: afhænger af det valgte kursus
Niveau: begynderniveau, mellemniveau, avanceret
5. Data Engineer ()
Dette kursus er ideelt, hvis du har erfaring med Python og ønsker at uddybe din viden samt opbygge en karriere som databehandler. Du vil lære at bygge datarørledninger ved hjælp af Python og pandas, indlæse store datasæt i PostgreSQL efter rengøring, transformation og validering.
Varighed: afhænger af dig
Sprog: engelsk
Pris: afhænger af abonnementsformen
Niveau: begynderniveau, mellemniveau
6. Data Engineering med Google Cloud ()
Dette kursus vil hjælpe dig med at tilegne dig de færdigheder, der er nødvendige for at bygge en karriere inden for big data. For eksempel arbejde med BigQuery, Spark. Du vil få viden, der er nyttig til at forberede dig til den anerkendte branchecertificering Google Cloud Professional Data Engineer.
Varighed: 4 måneder
Sprog: engelsk
Pris: lige nu gratis
Niveau: begynderniveau, mellemniveau
7. Data Engineering, Big Data på Google Cloud Platform ()
Et interessant kursus, der giver praktisk viden om databehandlingssystemer i GCP. Under lektionerne vil du lære at designe systemer, før du går i gang med udviklingsprocessen. Desuden vil du analysere både strukturerede og ustrukturerede data, anvende automatisk skalering og anvende ML-metoder til informationsudvinding.
Varighed: 3 måneder
Sprog: engelsk
Pris: lige nu gratis
Niveau: begynderniveau, mellemniveau
8. UC San Diego: Big Data Specialization ()
Kurset er baseret på brugen af Hadoop- og Spark-infrastruktur og anvendelse af disse metoder til behandling af store data i ML-processen. Du vil blive bekendt med grundlæggende brug af Hadoop med MapReduce, Spark, Pig og Hive. Du vil lære at bygge forudsigelsesmæssige modeller og bruge grafanalyse til at modellere problemer. Bemærk, at dette kursus ikke kræver programmeringserfaring.
Varighed: 8 måneder med 10 timer om ugen
Sprog: engelsk
Pris: lige nu gratis
Niveau: begynderniveau
9. Taming Big Data With Apache Spark and Python ()
Du vil lære at bruge stream- og datarammer i Spark3, få indsigt i, hvordan du bruger Amazon Elastic MapReduce til at arbejde med dit Hadoop-kluster. Lær at identificere problemer ved analyse af store data, og forstå hvordan GraphX-biblioteker arbejder med netværksanalyse, samt hvordan du kan bruge MLlib.
Varighed: afhænger af dig
Sprog: engelsk
Pris: fra 800 rubler til $149,99 (som heldet vil).
Niveau: begynderniveau, mellemniveau
10. PG Program i Big Data Engineering ()
Dette kursus giver dig indsigt i, hvordan Aadhaar fungerer, hvordan Facebook personaliserer nyhedsfeeds, og hvordan Data Engineering kan anvendes generelt. Centrale emner vil være databehandling (herunder realtidsbehandling), MapReduce, og big data-analyse.
Varighed: 11 måneder
Sprog: engelsk
Pris: omkring $3000
Niveau: begynderniveau
11. Data Scientist profession ()
Du vil lære at programmere i Python, studere rammer til opbygning af neurale netværk som Tensorflow og Keras. Du vil mestre databaser som MongoDB, PostgreSQL, SQLite3, og lære at arbejde med biblioteker som Pandas, NumPy og Matplotlib.
Varighed: 300 timers uddannelse
Sprog: russisk
Pris: de første seks måneder gratis, derefter 3900 rubler om måneden
Niveau: begynderniveau
12. Data Engineer 7.0 ()
Du vil gennemgå dybdegående studier af Kafka, HDFS, ClickHouse, Spark, Airflow, lambda-arkitektur og kappa-arkitektur. Du vil lære at forbinde værktøjer med hinanden for at danne pipelines og opnå baseline-løsninger. For at studere kræves en grundlæggende viden om Python 3.
Varighed: 21 lektioner, 7 uger
Sprog: russisk
Pris: fra 60.000 til 120.000 rubler
Niveau: begynderniveau
Hvis du har lyst til at tilføje endnu et godt kursus til listen, kan du skrive i kommentarerne eller i private beskeder. Vi vil opdatere indlægget.
Hvad mere nyttigt kan man læse i bloggen
→
→
→
→
→
Tilmeld dig vores -kanal, så du ikke går glip af den næste artikel. Vi skriver højst to gange om ugen og kun når det er relevant. Vi minder også om, at vi den 21. maj kl. 15:00 (MSK) vil afholde et seminar om "Informationsikkerhed for virksomheder ved fjernarbejde". Hvis du ønsker at forstå, hvordan man beskytter følsomme og virksomhedsoplysninger, mens medarbejdere arbejder hjemmefra - tilmeld dig!
Kilde: habr.com
