데이터 엔지니어링 온라인 강좌 12개

Statista에 따르면, 빅데이터 시장 규모는 2025년 175제타바이트에서 41년에는 2019제타바이트로 성장할 것으로 예상됩니다.예정). 이 분야에 취업하려면 클라우드에 저장된 빅데이터를 활용하는 방법을 이해해야 합니다. Cloud4Y는 해당 분야의 지식을 확장하고 클라우드 인증을 향한 좋은 출발점이 될 수 있는 12개의 유료 및 무료 데이터 엔지니어링 과정 목록을 편집했습니다.

머리말

데이터 엔지니어란 무엇인가요? 데이터 과학 프로젝트에서 데이터 아키텍처를 생성하고 유지 관리하는 사람입니다. 책임에는 서버와 애플리케이션 간의 원활한 데이터 흐름 보장, 새로운 데이터 관리 소프트웨어 통합, 기본 데이터 프로세스 개선 및 데이터 파이프라인 생성이 포함될 수 있습니다.

클라우드 컴퓨팅, 데이터 웨어하우스, ETL(추출, 변환, 로딩) 등을 작업하기 위해 데이터 엔지니어가 숙달해야 하는 기술과 도구는 엄청나게 많습니다. 또한 필요한 기술의 수는 계속 증가하고 있습니다. 따라서 데이터 엔지니어는 정기적으로 지식을 보충해야 합니다. 우리 목록에는 초보자와 숙련된 전문가를 위한 과정이 포함되어 있습니다. 당신에게 맞는 것을 선택하십시오.

1. 데이터공학 나노학위 자격증 (Udacity의)

데이터 모델을 설계하고, 데이터 웨어하우스와 데이터 레이크를 생성하고, 데이터 파이프라인을 자동화하고, 데이터 세트 배열을 사용하여 작업하는 방법을 배우게 됩니다. 프로그램이 끝나면 Capstone 프로젝트를 완료하여 새로운 기술을 테스트하게 됩니다.

지속: 5개월, 주 5시간
언어: 영어
가격: $ 1695
수평: 초기의

2. 데이터 엔지니어 자격증 취득(Coursera)

기초부터 가르치고 있습니다. 강의와 실습 프로젝트를 통해 단계별로 기술을 연마할 수 있습니다. 교육이 끝나면 ML 및 빅데이터를 사용할 준비가 됩니다. 최소한 최소한의 수준에서는 Python을 아는 것이 좋습니다.

지속: 8개월, 주 10시간
언어: 영어
가격😕
수평: 초기의

3. 데이터 엔지니어 되기: 개념 익히기(LinkedIn 학습)

데이터 엔지니어링 및 DevOps 기술을 개발하고, 빅 데이터 애플리케이션을 생성하는 방법, 데이터 파이프라인을 생성하고, Hazelcast 및 데이터베이스를 사용하여 실시간으로 애플리케이션을 처리하는 방법을 배웁니다. 하둡.

지속: 너에게 달렸다
언어: 영어
가격: 첫 달 - 무료
수평: 초기의

4. 데이터공학과목 (EDX)

다음은 데이터 엔지니어링을 소개하고 분석 솔루션을 개발하는 방법을 알려주는 일련의 프로그램입니다. 코스는 난이도에 따라 카테고리로 나누어져 있으므로 경험 수준에 따라 하나를 선택할 수 있습니다. 교육 중에는 Spark, Hadoop, Azure를 사용하고 기업 데이터를 관리하는 방법을 배우게 됩니다.

지속: 너에게 달렸다
언어: 영어
가격: 선택한 코스에 따라 다름
수평: 초급, 중급, 고급

5. 데이터 엔지니어 (데이터퀘스트)

Python에 대한 경험이 있고 지식을 심화하고 데이터 과학자로서의 경력을 쌓고 싶다면 이 과정을 수강할 가치가 있습니다. Python 및 Pandas를 사용하여 데이터 파이프라인을 구축하고 정리, 변환 및 검증 후 대규모 데이터 세트를 Postgres 데이터베이스에 로드하는 방법을 배웁니다.

지속: 너에게 달렸다
언어: 영어
가격: 구독 양식에 따라 다름
수평: 초급, 중급

6. Google Cloud를 활용한 데이터 엔지니어링(Coursera)

이 과정은 빅 데이터 분야에서 경력을 쌓는 데 필요한 기술을 습득하는 데 도움이 됩니다. 예를 들어 BigQuery, Spark로 작업합니다. 업계에서 인정받는 Google Cloud 전문 데이터 엔지니어 자격증을 준비하는 데 필요한 지식을 얻을 수 있습니다.

지속: 4개월
언어: 영어
가격: 지금은 무료
수평: 초급, 중급

7. 데이터 엔지니어링, Google Cloud Platform의 빅데이터(Coursera)

GCP의 데이터 처리 시스템에 대한 실용적인 지식을 제공하는 흥미로운 과정입니다. 수업 중에는 개발 프로세스를 시작하기 전에 시스템을 설계하는 방법을 배우게 됩니다. 또한 구조화된 데이터와 구조화되지 않은 데이터를 모두 분석하고, 자동 크기 조정을 적용하고, ML 기술을 적용하여 정보를 추출합니다.

지속: 3개월
언어: 영어
가격: 지금은 무료
수평: 초급, 중급

8. UC San Diego: 빅데이터 전문화(Coursera)

이 과정은 Hadoop 및 Spark 프레임워크를 사용하고 이러한 빅 데이터 기술을 ML 프로세스에 적용하는 것을 기반으로 합니다. MapReduce, Spark, Pig 및 Hive와 함께 Hadoop을 사용하는 기본 사항을 알아봅니다. 예측 모델을 구축하고 그래프 분석을 사용하여 문제를 모델링하는 방법을 알아보세요. 이 과정에는 프로그래밍 경험이 필요하지 않습니다.

지속: 8개월 주당 10시간
언어: 영어
가격: 지금은 무료
수평: 초기의

9. Apache Spark와 Python으로 빅 데이터 길들이기(Udemy)

Spark3에서 스트림 구조와 데이터 프레임을 사용하는 방법을 배우고, Amazon의 Elastic MapReduce 서비스를 사용하여 Hadoop 클러스터와 작업하는 방법을 이해하게 됩니다. 빅데이터 분석에서 문제를 식별하는 방법을 배우고 GraphX ​​라이브러리가 네트워크 분석과 함께 작동하는 방식과 MLlib를 사용할 수 있는 방법을 이해합니다.

지속: 너에게 달렸다
언어: 영어
가격: 800루블부터 $149,99까지 (운에 따라 다름)
수평: 초급, 중급

10. 빅데이터공학 PG 프로그램 (upGrad)

이 과정을 통해 Aadhaar의 작동 방식, Facebook이 뉴스 피드를 개인화하는 방식, 데이터 엔지니어링이 일반적으로 사용되는 방식을 이해할 수 있습니다. 주요 주제는 데이터 처리(실시간 처리 포함), MapReduce, 빅데이터 분석입니다.

지속: 11개월
언어: 영어
가격: 약 $3000
수평: 초기의

11. 직업 데이터 과학자 (스킬 박스)

Python으로 프로그래밍하는 방법을 배우고 신경망 Tensorflow 및 Keras 훈련을 위한 프레임워크를 연구합니다. MongoDB, PostgreSQL, SQLite3 데이터베이스를 마스터하고 Pandas, NumPy 및 Matpotlib 라이브러리 작업 방법을 알아보세요.

지속: 300시간 훈련
언어: 러시아어
가격: 처음 3900개월은 무료, 그 이후에는 월 XNUMX루블
수평: 초기의

12. 데이터 엔지니어 7.0 (새로운 직업 연구실)

Kafka, HDFS, ClickHouse, Spark, Airflow, 람다 아키텍처 및 카파 아키텍처에 대한 심층적인 연구를 받게 됩니다. 도구를 서로 연결하고, 파이프라인을 형성하고, 기본 솔루션을 얻는 방법을 배우게 됩니다. 공부하려면 Python 3에 대한 최소한의 지식이 필요합니다.

지속: 21회 수업, 7주
언어: 러시아어
가격: 60 ~ 000 루블
수평: 초기의

목록에 다른 좋은 강좌를 추가하고 싶다면 댓글이나 PM에서 구독을 취소할 수 있습니다. 게시물을 업데이트하겠습니다.

블로그에서 무엇을 더 읽을 수 있습니까? 클라우드4Y

→ 우주의 기하학은 무엇입니까?
→ 스위스 지형도의 부활절 달걀
→ "클라우드" 개발의 단순화되고 매우 짧은 역사
→ 은행은 어떻게 실패했는가?
→ 90년대 컴퓨터 브랜드 3부 최종편

우리의 구독 텔레그램- 다음 기사를 놓치지 않도록 채널을 운영하세요. 우리는 일주일에 두 번 이상 사업에 대해서만 글을 씁니다. 또한 21월 15일 00:XNUMX(모스크바 시간)에 웨비나 "원격 근무 시 비즈니스 정보 보안"이라는 주제로. 직원이 재택근무할 때 민감한 기업 정보를 보호하는 방법을 알고 싶다면 등록하세요!

출처 : habr.com