據 Statista 稱，到 2025 年，大數據市場規模將成長至 175 ZB，而 41 年為 2019 ZB（）。 要在該領域找到工作，您需要了解如何使用儲存在雲端中的大數據。 Cloud4Y 編制了 12 個付費和免費資料工程課程的列表，這些課程將擴展您在該領域的知識，並且可以成為您獲得雲端認證之路的良好起點。
前言
什麼是資料工程師？ 這是負責在資料科學專案中創建和維護資料架構的人員。 職責可能包括確保伺服器和應用程式之間的資料流暢、整合新的資料管理軟體、改進底層資料流程以及建立資料管道。
資料工程師必須掌握大量的技術和工具才能使用雲端運算、資料倉儲、ETL（提取、轉換、載入）等。而且，所需技能的數量一直在成長，所以資料工程師需要定期補充自己的知識。 我們的清單包括針對初學者和經驗豐富的專業人士的課程。 選擇適合您的。
1. 資料工程奈米學位認證（)
您將學習如何設計資料模型、建立資料倉儲和資料湖、自動化資料管道以及使用資料集數組。 在課程結束時，您將透過完成 Capstone 專案來測試您的新技能。
為期：5個月，每週5小時
語： 英語
Цена：$ 1695
Уровень： 最初的
2. 成為資料工程師認證（)
他們從基礎開始教學。 您可以透過講座和實作專案逐步提升您的技能。 訓練結束時，您將準備好使用機器學習和大數據。 建議至少了解 Python 的最低水準。
為期：8個月，每週10小時
語： 英語
Цена😕
Уровень： 最初的
3. 成為資料工程師：掌握概念（)
您將培養資料工程和 DevOps 技能，學習如何建立大數據應用程式、建立資料管道、使用 Hazelcast 和資料庫即時處理應用程式.
為期： 取決於你
語： 英語
Цена：第一個月 - 免費
Уровень： 最初的
4. 數據工程課程（)
這裡有一系列課程，向您介紹資料工程並教您如何開發分析解決方案。 課程根據難度等級分為不同類別，因此您可以根據您的經驗程度進行選擇。 在培訓期間，您將學習使用 Spark、Hadoop、Azure 並管理企業資料。
為期： 取決於你
語： 英語
Цена: 取決於所選課程
Уровень：初級、中級、高級
5.資料工程師（)
如果您有 Python 經驗並希望加深您的知識並建立資料科學家的職業生涯，那麼本課程值得學習。 您將學習如何使用 Python 和 pandas 建立資料管道，在清理、轉換和驗證後將大型資料集載入到 Postgres 資料庫中。
為期： 取決於你
語： 英語
Цена：取決於訂閱形式
Уровень：初級、中級
6. 使用 Google Cloud 進行資料工程 ()
本課程將幫助您獲得在大數據領域建立職業生涯所需的技能。 例如，使用 BigQuery、Spark。 您將獲得準備獲得行業認可的 Google Cloud 專業資料工程師認證所需的知識。
為期： 4個月
語： 英語
Цена: 暫時免費
Уровень：初級、中級
7. 資料工程，Google雲端平台上的大數據（)
這是一門有趣的課程，提供 GCP 中資料處理系統的實用知識。 在課程中，您將學習如何在開始開發過程之前設計系統。 此外，您還將分析結構化和非結構化資料、應用自動縮放以及應用 ML 技術來提取資訊。
為期： 3個月
語： 英語
Цена: 暫時免費
Уровень：初級、中級
8. 加州大學聖地牙哥分校：大數據專業化（)
該課程基於使用 Hadoop 和 Spark 框架並將這些大數據技術應用到機器學習過程中。 您將學習將 Hadoop 與 MapReduce、Spark、Pig 和 Hive 結合使用的基礎知識。 了解如何建立預測模型並使用圖形分析來建模問題。 請注意，本課程不需要任何程式設計經驗。
為期：8個月每週10小時
語： 英語
Цена: 暫時免費
Уровень： 最初的
9. 使用 Apache Spark 和 Python 馴服大數據 ()
您將學習如何使用 Spark3 中的串流結構和資料框架，並了解如何使用 Amazon 的 Elastic MapReduce 服務與 Hadoop 叢集搭配使用。 學習辨識大數據分析中的問題，了解 GraphX 函式庫如何與網路分析搭配使用以及如何使用 MLlib。
為期： 取決於你
語： 英語
Цена：從 800 盧佈到 149,99 美元（取決於你的運氣）
Уровень：初級、中級
10. 大數據工程PG課程（)
本課程將讓您了解 Aadhaar 的工作原理、Facebook 如何個人化動態消息以及如何使用資料工程。 關鍵主題是資料處理（包括即時處理）、MapReduce、大數據分析。
為期：11個月
語： 英語
Цена：3000美元左右
Уровень： 最初的
11. 職業資料科學家（)
您將學習用 Python 編程，研究訓練神經網路 Tensorflow 和 Keras 的框架。 掌握 MongoDB、PostgreSQL、SQLite3 資料庫，學習使用 Pandas、NumPy 和 Matpotlib 函式庫。
為期：300小時的培訓
語：俄語
Цена：前六個月免費，然後每月 3900 盧布
Уровень： 最初的
12.資料工程師7.0（)
您將深入學習 Kafka、HDFS、ClickHouse、Spark、Airflow、lambda 架構和 kappa 架構。 您將學習如何將工具相互連接、形成管道、獲得基線解決方案。 要學習，需要至少具備 Python 3 知識。
為期： 21 堂課，7 週
語：俄語
Цена： 60 至 000 盧布
Уровень： 最初的
如果您想在清單中添加其他好課程，您可以在評論或私訊中取消訂閱。 我們將更新該帖子。
您還可以在博客上閱讀什麼？
→
→
→
→
→
訂閱我們的 -頻道以免錯過下一篇文章。 我們每週寫信不超過兩次，而且僅限於公務。 我們也提醒您，21月15日00:XNUMX（莫斯科時間）我們將舉行 主題為「遠距工作時的商業資訊安全」。 如果您想了解員工在家工作時如何保護敏感資訊和公司訊息，請註冊！
來源： www.habr.com