Per l'ultimi ottu anni aghju travagliatu cum'è capu di prughjettu (ùn scrivu micca codice à u travagliu), chì naturalmente affetta negativamente u mo backend tecnologicu. Aghju decisu di chjude a mo lacuna tecnologica è uttene a professione di ingegnere di dati. L'abilità core di un Data Engineer hè a capacità di cuncepisce, custruisce è mantene magazzini di dati.
Aghju fattu un pianu di furmazione, pensu chì serà utile micca solu per mè. U pianu hè focu annantu à i corsi d'autostudiu. A priorità hè data à i corsi gratuiti in russo.
Sezzioni:
- Algoritmi è strutture di dati. Sezione chjave. Amparate è tuttu u restu hà da travaglià ancu. Hè impurtante per piglià a manu nantu à u codice è aduprà e strutture basi è algoritmi.
- Database è data warehouses, Business Intelligence. Passemu da l'algoritmi à l'almacenamiento è u trattamentu di dati.
- Hadoop è Big Data. Quandu a basa di dati ùn hè micca inclusa nantu à u discu duru, o quandu i dati anu da esse analizatu, ma Excel ùn pò più carricà, grandi dati cumincianu. In u mo parè, hè necessariu di passà à sta sezione solu dopu un studiu prufondu di i dui precedenti.
Algoritmi è strutture di dati
In u mo pianu, aghju inclusu l'apprendimentu di Python, ripetendu i principii di matematica è algoritmizazione.
Database è data warehouses, Business Intelligence
- Libru: Martin Kleppman - Applicazioni altamente caricate. Prugrammazione, scala, supportu. U libru descrive cumu funziona diversi mudelli di dati, a so implementazione da l'internu, limitazioni è scelte secondu u compitu.
I temi ligati à a custruzzione di magazzini di dati, ETL, cubi OLAP sò assai dipindenti di l'arnesi, per quessa, ùn dete micca ligami à i corsi in stu documentu. Hè cunsigliatu di studià tali sistemi quandu travaglia in un prughjettu specificu in una cumpagnia specifica. Per a cunniscenza di ETL, pudete pruvà o .
In u mo parè, hè impurtante studià a metodulugia moderna di cuncepimentu di Data Vault , . È u megliu modu per amparà hè di piglià è implementà cù un esempiu simplice. Ci sò parechji esempi di implementazione di Data Vault in GitHub . U Libru Modern Data Warehouse: Modelling the Agile Data Warehouse cù Data Vault da Hans Hultgren.
Per familiarizà cù l'arnesi di Business Intelligence per l'utilizatori finali, pudete aduprà u designer gratuitu di rapporti, dashboards, mini magazzini di dati Power BI Desktop. Materiali educativi: , .
Hadoop è Big Data
- Avete bisognu di principià cù una implementazione indipendente di MapReduce senza biblioteche di terzu. Questu permetterà una megliu comprensione di implementazioni multithreaded in u futuru. Un esempiu eccellente in Python hè descrittu .
cunchiusioni
Micca tuttu ciò chì amparate pò esse applicatu à u travagliu. Dunque, avete bisognu di un prughjettu di graduazione in quale pruvate d'applicà a nova cunniscenza.
Ùn ci sò micca temi ligati à l'analisi di dati è Machine Learning in u pianu. questu s'applica più à a professione di Data Scientist. Ùn ci hè ancu micca temi ligati à AWS clouds, Azure. sti temi sò assai dipindenti nantu à a scelta di a piattaforma.
Dumande à a cumunità:
Quantu hè adattatu u mo pianu di livellu? Cosa da sguassà o aghjunghje?
Chì prughjettu vi ricumanderesti cum'è tesi ?
Source: www.habr.com