12 онлайн курса по инженерни данни

Според Statista до 2025 г. размерът на пазара на големи данни ще нарасне до 175 зетабайта в сравнение с 41 през 2019 г. (разписание). За да получите работа в тази област, трябва да разберете как да работите с големи данни, съхранявани в облака. Cloud4Y е съставил списък от 12 платени и безплатни курса за инженеринг на данни, които ще разширят знанията ви в областта и могат да бъдат добра отправна точка по пътя ви към облачни сертификати.

предговор

Какво е инженер по данни? Това е човекът, който отговаря за създаването и поддържането на архитектурата на данните в проект Data Science. Отговорностите могат да включват осигуряване на плавен поток от данни между сървъра и приложението, интегриране на нов софтуер за управление на данни, подобряване на основните процеси на данни и създаване на канали за данни.

Има огромен брой технологии и инструменти, които инженерът на данни трябва да овладее, за да работи с облачни изчисления, хранилища за данни, ETL (извличане, трансформация, зареждане) и т.н. Освен това броят на необходимите умения нараства през цялото време, така че инженерът на данни трябва редовно да допълва знанията си. Нашият списък включва курсове за начинаещи и опитни професионалисти. Изберете това, което ви подхожда.

1. Сертифициране на наностепени за инженерство на данни (Udacity)

Ще научите как да проектирате модели на данни, да създавате хранилища за данни и езера от данни, да автоматизирате конвейери за данни и да работите с масиви от набори от данни. В края на програмата ще изпробвате новите си умения, като завършите проект Capstone.

Продължителност: 5 месеца, 5 часа седмично
Език: Английски
Цена: $ 1695
Ниво: начален

2. Станете сертификат за инженер по данни (Coursera)

Те преподават от основите. Можете да напредвате стъпка по стъпка, като използвате лекции и практически проекти, за да работите върху уменията си. До края на обучението ще сте готови да работите с ML и големи данни. Препоръчително е да познавате Python поне на минимално ниво.

Продължителност: 8 месеца, 10 часа седмично
Език: Английски
Цена😕
Ниво: начален

3. Станете инженер по данни: овладяване на концепциите (Обучение на LinkedIn)

Ще развиете умения за инженеринг на данни и DevOps, ще научите как да създавате приложения с големи данни, да създавате канали за данни, да обработвате приложения в реално време с помощта на Hazelcast и база данни Hadoop.

Продължителност: Зависи от теб
Език: Английски
Цена: първи месец - безплатно
Ниво: начален

4. Курсове по инженерни данни (EDX)

Ето поредица от програми, които ви запознават с инженерството на данни и ви учат как да разработвате аналитични решения. Курсовете са разделени на категории въз основа на нивото на трудност, така че можете да изберете един според вашето ниво на опит. По време на обучението ще се научите да използвате Spark, Hadoop, Azure и да управлявате корпоративни данни.

Продължителност: Зависи от теб
Език: Английски
Цена: зависи от избрания курс
Ниво: начинаещи, средно напреднали, напреднали

5. Инженер по данни (DataQuest)

Този курс си струва да вземете, ако имате опит с Python и искате да задълбочите знанията си и да изградите кариера като специалист по данни. Ще научите как да изграждате канали за данни с помощта на Python и pandas, като зареждате големи набори от данни в база данни на Postgres след почистване, трансформиране и валидиране.

Продължителност: Зависи от теб
Език: Английски
Цена: зависи от формата за абонамент
Ниво: начинаещ, средно напреднал

6. Инженеринг на данни с Google Cloud (Coursera)

Този курс ще ви помогне да придобиете уменията, от които се нуждаете, за да изградите кариера в областта на големите данни. Например работа с BigQuery, Spark. Ще придобиете знанията, от които се нуждаете, за да се подготвите за признатото в индустрията сертифициране на Google Cloud Professional Data Engineer.

Продължителност: 4 месеца
Език: Английски
Цена: безплатно за сега
Ниво: начинаещ, средно напреднал

7. Data Engineering, Big Data на Google Cloud Platform (Coursera)

Интересен курс, който предоставя практически познания за системите за обработка на данни в GCP. По време на класа ще научите как да проектирате системи, преди да започнете процеса на разработка. Освен това ще анализирате както структурирани, така и неструктурирани данни, ще прилагате автоматично мащабиране и ще прилагате ML техники за извличане на информация.

Продължителност: 3 месеца
Език: Английски
Цена: безплатно за сега
Ниво: начинаещ, средно напреднал

8. UC San Diego: Специализация за големи данни (Coursera)

Курсът се основава на използването на рамката Hadoop и Spark и прилагането на тези техники за големи данни към процеса на машинно обучение. Ще научите основите на използването на Hadoop с MapReduce, Spark, Pig и Hive. Научете как да изграждате прогнозни модели и да използвате анализ на графики за моделиране на проблеми. Моля, обърнете внимание, че този курс не изисква никакъв опит в програмирането.

Продължителност: 8 месеца 10 часа седмично
Език: Английски
Цена: безплатно за сега
Ниво: начален

9. Укротяване на големи данни с Apache Spark и Python (Udemy)

Ще научите как да използвате структурата на потока и кадрите с данни в Spark3 и ще разберете как да използвате услугата Elastic MapReduce на Amazon за работа с вашия Hadoop клъстер. Научете се да идентифицирате проблемите в анализа на големи данни и разберете как библиотеките на GraphX ​​работят с мрежов анализ и как можете да използвате MLlib.

Продължителност: Зависи от теб
Език: Английски
Цена: от 800 рубли до $149,99 (в зависимост от вашия късмет)
Ниво: начинаещ, средно напреднал

10. PG програма по инженеринг на големи данни (upGrad)

Този курс ще ви даде разбиране за това как работи Aadhaar, как Facebook персонализира емисията с новини и как може да се използва Data Engineering като цяло. Ключови теми ще бъдат обработка на данни (включително обработка в реално време), MapReduce, анализ на големи данни.

Продължителност: 11 месец
Език: Английски
Цена: около $3000
Ниво: начален

11. Професия Учен по данни (Кутия за умения)

Ще се научите да програмирате на Python, ще изучавате рамките за обучение на невронни мрежи Tensorflow и Keras. Овладейте базите данни MongoDB, PostgreSQL, SQLite3, научете се да работите с библиотеките Pandas, NumPy и Matpotlib.

Продължителност: 300 часа обучение
Език: Руски
Цена: първите шест месеца безплатно, след това 3900 рубли на месец
Ниво: начален

12. Data Engineer 7.0 (Лаборатория за нови професии)

Ще получите задълбочено проучване на Kafka, HDFS, ClickHouse, Spark, Airflow, ламбда архитектура и капа архитектура. Ще научите как да свързвате инструменти помежду си, оформяйки конвейери, получаване на базово решение. За обучение са необходими минимални познания по Python 3.

Продължителност: 21 урока, 7 седмици
Език: Руски
Цена: от 60 000 до 120 000 рубли
Ниво: начален

Ако искате да добавите друг добър курс към списъка, можете да се отпишете в коментарите или в ЛС. Ще актуализираме публикацията.

Какво друго можете да прочетете в блога? Cloud4Y

→ Каква е геометрията на Вселената?
→ Великденски яйца на топографски карти на Швейцария
→ Опростена и много кратка история на развитието на "облаците"
→ Как фалира банката?
→ Компютърни марки от 90-те, част 3, финал

Абонирайте се за нашите Telegram-канал, за да не пропуснете следващата статия. Пишем не повече от два пъти седмично и само по работа. Напомняме ви също, че на 21 май в 15:00 (московско време) ще проведем уебинар на тема „Сигурност на бизнес информацията при дистанционна работа“. Ако искате да разберете как да защитите чувствителна и корпоративна информация, когато служителите работят от вкъщи, регистрирайте се!

Източник: www.habr.com