A Statista szerint, 2025-re a big data piaca 175 zettabájt méretűre nő, szemben a 2019-es 41 zettabájttal (). Ahhoz, hogy munkát találjon ezen a területen, értenie kell a felhőben tárolt nagy adatokkal való munkához. A Cloud4Y összeállított egy listát 12 fizetős és ingyenes adat- mérnöki tanfolyamról, amelyek bővítik tudását ezen a téren, és jó kiindulópontot jelenthetnek a felhőtanúsítványok megszerzéséhez.
Bevezető
Mi az adatfeldolgozási szakember (data engineer)? Ő az, aki felelős az adatok architektúrájának létrehozásáért és támogatásáért a Data Science projektekben. Feladatai közé tartozhat az adatok folyamatos áramlásának biztosítása a szerver és az alkalmazás között, új szoftverek integrálása az adatok kezelésére, az alapvető adatfolyamatok tökéletesítése és adatcsatornák létrehozása.
Óriási mennyiségű technológia és eszköz áll rendelkezésére az adat mérnöknek ahhoz, hogy dolgozhasson felhőalapú számítással, adattárakkal, ETL (kivonás, átalakítás, betöltés) stb. Kapcsolatban. Ráadásul a szükséges készségek száma folyamatosan növekszik, ezért az adat mérnöknek rendszeresen bővítenie kell tudását. Listaunkban kezdőknek és tapasztalt szakembereknek szóló tanfolyamok találhatók. Válassza ki, ami Önnek a legmegfelelőbb.
1. Data Engineering Nanodegree Certification ()
Megtanulja, hogyan kell adatmodelleket tervezni, adattárakat és adatfolyamokat létrehozni, automatizálni az adatcsatornákat, és dolgozni adathalmazon. A program végén új készségeit egy Capstone projekttel ellenőrzi.
Időtartam: 5 hónap, heti 5 óra
Nyelv: angol
Ár: $1695
Szint: kezdő
2. Become a Data Engineer Certification ()
A szükséges alapoktól tanítanak. Lépésről lépésre fejlesztheti magát, előadások és gyakorlati projektek segítségével munkájához. A tanulmányok végeztével felkészült lesz a ML és a big data kezelésére. Javasolt legalább minimális szintű Python ismeret.
Időtartam: 8 hónap, heti 10 óra
Nyelv: angol
Ár😕
Szint: kezdő
3. Become a Data Engineer: Mastering the Concepts ()
Fejleszteni fogja a data design és a DevOps készségeit, megtanulja, hogyan kell Big Data alkalmazásokat létrehozni, adatcsatornákat építeni, valós idejű alkalmazásokat kezelni Hazelcast használatával és adatbázisokkal..
Időtartam: önállóan dönthet róla
Nyelv: angol
Ár: az első hónap ingyenes
Szint: kezdő
4. Data Engineering Courses ()
Itt egy sor programot gyűjtöttünk össze, amelyek megismertetnek a data engineeringgel és megtanítanak analitikai megoldások fejlesztésére. A kurzusok nehézségi szint szerint kategorizálva vannak, így választhatsz egyet a tapasztalati szintednek megfelelően. A képzés során megtanulod a Spark, Hadoop, Azure használatát és a vállalati adatok kezelését.
Időtartam: önállóan dönthet róla
Nyelv: angol
Ár: a választott kurzustól függ
Szint: kezdő, középhaladó, haladó
5. Data Engineer ()
Ezt a kurzust akkor érdemes választanod, ha van tapasztalatod Pythonban, és szeretnéd mélyíteni tudásodat, valamint karriert építeni az adatfeldolgozás területén. Megtanulod adatpipelines építését Python és pandas segítségével, nagy adathalmazok betöltését a Postgres adatbázisba tisztítás, átalakítás és ellenőrzés után.
Időtartam: önállóan dönthet róla
Nyelv: angol
Ár: a hozzájárulás formájától függ
Szint: kezdő, középhaladó
6. Data Engineering with Google Cloud ()
Ez a kurzus segít megszerezni azokat a készségeket, amelyek szükségesek a nagy adatokkal kapcsolatos karrier építéséhez. Például a BigQuery és a Spark használata. Olyan tudásra teszel szert, amely segít a Google Cloud Professional Data Engineer elismert iparági minősítésének előkészítésében.
Időtartam: 4 hónap
Nyelv: angol
Ár: jelenleg ingyenes
Szint: kezdő, középhaladó
7. Data Engineering, Big Data on Google Cloud Platform ()
Érdekes kurzus, amely gyakorlati ismereteket nyújt a GCP adatfeldolgozó rendszereiről. Az órák során megtanulod, hogyan kell rendszereket tervezni, mielőtt elkezdenéd a fejlesztési folyamatot. Ezenkívül elemezni fogsz strukturált és struktúrázatlan adatokat, automatikus skálázást alkalmazni, és ML módszereket használni az információk kinyerésére.
Időtartam: 3 hónap
Nyelv: angol
Ár: jelenleg ingyenes
Szint: kezdő, középhaladó
8. UC San Diego: Big Data Specialization ()
A kurzus a Hadoop és Spark infrastruktúrájára épít, és ezeket a nagy adatok feldolgozására szolgáló módszereket alkalmazza az ML folyamatában. Megismerkedsz a Hadoop MapReduce, Spark, Pig és Hive használatának alapjaival. Megtudod, hogyan lehet előrejelző modelleket építeni, és grafanalitikát használni a problémák modellezésére. Fontos megjegyezni, hogy ehhez a kurzushoz nem szükséges programozási tapasztalat.
Időtartam: 8 hónap, heti 10 órában
Nyelv: angol
Ár: jelenleg ingyenes
Szint: kezdő
9. Taming Big Data With Apache Spark and Python ()
Megismerheti, hogyan használja a streaming architektúrát és az adatrácsokat a Spark3-ban, bepillantást nyerhet az Amazon Elastic MapReduce szolgáltatásának használatába a Hadoop klaszterével kapcsolatban. Tanuljon meg problémákat azonosítani a nagy adatok elemzése során, és értse meg, hogyan működnek a GraphX könyvtárak a hálózatelemzésnél, és hogyan használhatja az MLlib-et.
Időtartam: önállóan dönthet róla
Nyelv: angol
Ár: 800 rubeltől 149,99 dollárig (attól függően, hogy milyen szerencséje van)
Szint: kezdő, középhaladó
10. PG Program a Big Data Engineeringben ()
Ez a kurzus bemutatja, hogyan működik az Aadhaar, hogyan személyre szabja a Facebook a hírcsatornáját és hogyan alkalmazható egyáltalán az adatmérnökség. A kulcsfontosságú témák közé tartozik az adatfeldolgozás (beleértve a valós idejű feldolgozást), MapReduce és a nagy adatok analitikája.
Időtartam: 11 hónap
Nyelv: angol
Ár: körülbelül 3000 dollár
Szint: kezdő
11. A Data Scientist szakma ()
Megtanulhatja a Python programozást, megismerkedhet a Tensorflow és Keras keretrendszerekkel a mélytanulásban. Elsajátíthatja a MongoDB, PostgreSQL, SQLite3 adatbázisokat, és megtanulhatja használni a Pandas, NumPy és Matplotlib könyvtárakat.
Időtartam: 300 óra tanulás
Nyelv: orosz
Ár: első hat hónap ingyenes, majd havi 3900 rubel
Szint: kezdő
12. Data Engineer 7.0 ()
Ön mélyrehatóan tanulmányozni fogja a Kafka, HDFS, ClickHouse, Spark, Airflow, lambda és kappa architektúrákat. Megtanulhatja összekapcsolni az eszközöket egymással, csővezetékek kialakításával, alapmegoldások létrehozásával. A tanuláshoz minimális Python 3 ismeret szükséges.
Időtartam: 21 alkalom, 7 hét
Nyelv: orosz
Ár: 60 000 és 120 000 rubel között
Szint: kezdő
Ha szeretné, hogy egy újabb jó kurzust felvegyünk a listára, kérjük, írjon erről a megjegyzésekben vagy közvetlen üzenetben. Kiegészítjük a bejegyzést.
Milyen hasznos dolgokat olvashat még a blogban
→
→
→
→
→
Iratkozzon fel az -csatorna, hogy ne maradjon le egy újabb cikkről. Hetente legfeljebb kétszer írunk, csak fontos dolgokról. Emlékeztetjük, hogy május 21-én 15:00 (MSK) tartunk előadást „A vállalkozások információbiztonsága távmunkavégzés közben” témában. Ha szeretné megérteni, hogyan védheti meg az érzékeny és vállalati információkat az otthonról dolgozó alkalmazottak esetében — regisztráljon!
Forrás: habr.com
