Data Scientist ááŸáá·áº Data Engineer ááá¯á·á á¡áá¯ááºá¡ááá¯ááºáá»á¬ážááẠáááŒá¬áá ááŸá¯ááºááœá±ážáá±áá«áááºá áá¯áá¹ááá®áá áºáá¯á á®ááœáẠáá±áá¬ááŒáá·áºáá¯ááºáá±á¬ááºááŒááºážááá¯ááºáᬠááá¯ááºááá¯ááºá¡áá±ážá áááºá¡áá»ááºá¡áááºáá»á¬ážá áááºážááá¯á·áááœá²ááŒááºážá áááºááŒá¬ááŸá¯á¡ááœáẠááá°áá®áá±á¬áááºááœááºáá»ááºáá»á¬ážááŸáá·áº áááºááá·áºáá¯ááºáááºážáá¡á áááºá¡ááá¯ááºážááá¯ááá¯ááºááœááºááá·áºáááºáá°áá±á¬ ááœá²ááŒá¬ážáá±á¬ á¡ááŒá¶áá¬ááºáá áºáá¯á á®ááŸááá±á¬ááŒá±á¬áá·áº áá áºáá¯á á®ááœáẠááá¯ááºááá¯ááºááá¯á¡ááºáá»ááºáá»á¬ážááŸááááºá
áá®á¡áá°ážáá¯ááœá±ááŒá¬ážá ááœá¬ááŒá¬ážáá»ááºá áááºááá¯á á®ážááœá¬ážáá±ážááŒá¿áá¬ááœá±ááᯠááŒá±ááŸááºážááŒááá²á áá°ááá¯á·ááŸá¬ áááºááá¯á¡áááºá¡áá»ááºážááœá±áá²á· áááºááœá±áááºáá±á¬ááºááŸááá²ááá¯áᬠá¡ááŒá±ááŸá¬ááŒáá·áºáá¡á±á¬ááºá áá á¹á ááºážá ááŒá®ážáá¬áá²á·á¡ááœáẠá¡á²áá«ááᯠá á¬á á±á¬ááºááŸá áºáá¯á¡ááŒá Ạááœá²ááá¯ááºáááºá
ááááá±á¬ááºážáá«ážááœááºá áá¬áá¡ááŒá®ážá¡áá² Elena Gerasimovaá" Netology ááœáẠData Scientist ááŸáá·áº Data Engineer á¡ááŒá¬áž ááœá¬ááŒá¬ážáá»ááºááŸáá·áº áááºááá·áºáááááá¬áá»á¬ážááŒáá·áº á¡áá¯ááºáá¯ááºáááºááᯠááŒá±á¬ááŒááẠá
á¡ááºáá»ááºáá®áá¬ááœá±áá²á· áááá¹áá¶ááá¬ááŸááºááœá±áá²á· á¡áááºážááá¹áá áááºááá¯ááœá¬ááŒá¬ážáá²á
áá±áá¬á¡ááºáá»ááºáá®áá¬áá áºáŠážááẠáá±áá¬á¡ááŒá±áá¶á¡áá±á¬ááºá¡á¡á¯á¶áá»á¬áž- áá±áá¬áá±á·á áºáá»á¬ážá ááá¯ááŸá±á¬ááºááŸá¯ááŸáá·áº á¡á á¯ááá¯ááºá¡ááŒá¯á¶ááá¯ááºáá¯ááºáá±á¬ááºááŸá¯á áá áºáá»á¬ážááᯠáá®ááœááºá á ááºážáááºááááºážááááºážá á±á¬áá·áºááŸá±á¬ááºáá±ážáá±á¬ áá»áœááºážáá»ááºáá°áá áºáŠážááŒá áºáááºá á¡ááŒá¬ážáá áºáááºááœááºá áááºážááẠáá±á·áá¬áá¯á¶ážáááºáá°áá»á¬ážááŸáá·áº áá±áá¬áááá¹áá¶ááá¬ááŸááºáá»á¬áž á¡áá¯á¶ážááŒá¯áááºá¡ááœáẠáá±áá¬ááᯠááá·áºá ááºááŒá®áž ááŒá®ážááŒááºážáá±ážáá°ááŒá áºááŒá®ážá ááá¯ááá¯áááºááŸá¬ áá±áá¬áá¯ááºáá±á¬ááºááŒááºáž ááá¯ááºááá¯ááºážáá»á¬ážááᯠáááºáá®ážáá±ážáá°ááŒá áºáááºá
Data Scientist ááẠáá¯ááºáááºážáá»á¬ážááᯠáá»áŸáá¯á·ááŸááºáá¯á¶á á¶áá»á¬ážááᯠááŸá¬ááœá±áááºá ááá¯ážáááºááŸá¯áá»á¬ážááᯠááŒáá¯áááºááá·áºááŸááºážááŒá®áž á¡áááá á®ážááœá¬ážáá±ážáá¯ááºáááºážá ááºáá»á¬ážááᯠá¡áá±á¬ááºážáá¯á¶ážááŒá áºá¡á±á¬áẠáá°áá®áá±ážááá·áº á ááºáááºáá°ááŸá¯ááá¯ááºáᬠá¡ááºáááá¯áá®áááºáá»á¬ážááŸáá·áº á¡á¬áá¯á¶ááŒá±á¬ááœááºáááºáá»á¬ážááᯠá¡áá¯á¶ážááŒá¯á ááá·áºááŸááºážááá¯ááºáá±á¬ (ááŸáá·áº á¡ááŒá¬áž) áá±á¬áºáááºáá»á¬ážááᯠáááºáá®ážáá±á·áá»áá·áºáá±ážáá«áááºá
Data Scientist ááŸáá·áº Data Engineer á¡ááŒá¬áž á¡ááá ááœá¬ááŒá¬ážáá»ááºááŸá¬ áá»á¬ážáá±á¬á¡á¬ážááŒáá·áº ááá°áá®áá±á¬ áááºážááá¯ááºáá»á¬áž ááŸáááŒááẠá ááŸá áºáá¯áá¯á¶ážááẠáá±áá¬ááᯠááá°áá¯á¶ážá áœá²ááá¯ááºá á±áááºááŸáá·áº á¡áááºá¡ááœá±ážááŒáá·áºáá¬ážááŒá±á¬ááºáž áá±áá»á¬á á±ááẠáá¯ááºáá±á¬ááºáááºá ááá¯á·áá±á¬áº Data Scientist ááẠáááºážááá±ážááœááºážáá»á¬ážá¡ááœáẠá¡ááŒá±áá»á¬ážááŸáá·áº áá±áá¬áá±áá áá Ạ(á¥ááá¬á Hadoop ááá¯á¡ááŒá±áá¶á) ááœáẠá ááºážáááºááŸá¯áá»á¬ážááŒá¯áá¯ááºááŒá®áž áá°áá®áá±á¬ Spark cluster á¡ááœááºážááŸá data scientist á០data scientist ááŸáá±ážáá¬ážáá¬ážáá±á¬ machine learning algorithm ááᯠáááºáá±á¬ááºááŸá¯áá±ážáááºá¡ááœáẠááá¯ááºááá¯ááºážáá áºáá¯ááᯠáááºáá®ážáá±ážáá«áááºá áá±áá áá áºá
áá±áá¬á¡ááºáá»ááºáá®áá¬áá áºáŠážááẠá¡ááœá²á·áá áºááœá²á·ááá áºá áááºáá áºááá¯ááºážá¡ááŒá Ạáá¯ááºáá±á¬ááºááŒááºážááŒáá·áº áá¯ááºáááºážáá áºáá¯á¡ááœáẠáááºááá¯ážááᯠáá°áá±á¬ááºáá¬áááºá áááºážááá¬áááºááŸá¬ ááá°áá®áá±á¬áá«áááºáá°áá»á¬ážááŒá¬ážááœáẠá¡áá±ážááŒá®ážáá±á¬áá»áááºáááºááŸá¯áá áºáá¯á¡ááŒá Ạáá¯ááºáá±á¬ááºáááºááŒá áºáááº- áá±á¬á·ááºáá²áá±ážáá¬ážáá°áá»á¬ážá០áá¯ááºáááºážá á¬ážáá¯á¶ážáá°áá»á¬ážáá¶ááá¯á· á¡á á®áááºáá¶áááºááŒááŸá¯á á á»á±ážááœááºááŸá¬ááœá±áá±ážááŸáá·áº áá¯ááºáá¯ááºá០BI á¡áá ááœá²ááŒááºážá áááºááŒá¬áá°áá»á¬ážá áá¯ááºáá¯ááºá áœááºážá¡á¬ážááŒáŸáá·áºáááºáááºá
ááá·áºáá»ááºáááºá¡áá±ááŸáá·áº Data Scientist ááẠáá¯áá¹ááá®ááá»á°áá¬ááœáẠáááºááŒáœá
áœá¬áá«áááºááŒá®áž ááá¯ážááœááºážááááŒááºááŸá¯áá»á¬ážááᯠáá¯ááºáá°ááŒááºážá áá¯á¶ážááŒááºáá»ááºáá»á¬ážáá»ááŒááºážá á¡ááá¯á¡áá»á±á¬ááºá
áá
áºááá¯ááºáᬠá¡ááºáááá¯áá®áááºáá»á¬ážááᯠá¡áá±á¬ááºá¡áááºáá±á¬áºááŒááºážá áá±á¬áºáááºááŒá¯áá¯ááºááŒááºážááŸáá·áº áá±áá¬ááŸáááºááá¯ážáá»á¬ážáá¯ááºáá¯ááºááŒááºážááá¯á·ááœáẠáá«áááºáá«áááºá
áá±áá¬ááŸáá·áºá¡áá¯ááºáá¯ááºááŒááºážááẠGIGO (á¡ááŸáá¯ááºá¡ááœááºáž - á¡ááŸáá¯ááºáá¯ááºááŒááºáž) áááá¬áá¡áááŒá
áºáááº- áá±á·áá¬áá°áá»á¬ážááŸáá·áº áá±áá¬áááá¹áá¶ááá¬ááŸááºáá»á¬ážááẠááŒáá¯áááºááŒááºáááºáá¬ážááŒááºážáááŸááá±á¬á ááŸá¬ážááœááºážááá¯ááºáá»á±ááŸááá±á¬ áá±áá¬áá»á¬ážááᯠááá¯ááºááœááºááŒá±ááŸááºážáá«áá á¡áááºážááŒá¬ážáá¯á¶ážáá±á¬ááœá²ááŒááºážá
áááºááŒá¬ááŸá¯ á¡ááºáááá¯áá®áááºááᯠá¡áá¯á¶ážááŒá¯ááá·áºááá¯áẠááááºáá»á¬ážááẠáááŸááºáá«á
áá±áá¬á¡ááºáá»ááºáá®áá¬áá»á¬ážááẠáá±áá¬ááᯠá á®áá¶áá±á¬ááºááœááºááŒááºážá ááá·áºááŸááºážáá±ážááŸáá·áº á¡ááœááºááŒá±á¬ááºážáááºá¡ááœáẠááá¯ááºááá¯ááºážáá»á¬ážáááºáá±á¬ááºáᬠáá±áá¬áááá¹áá¶ááá¬ááŸááºáá»á¬ážááᯠá¡áááºá¡ááœá±ážááŒáá·áºáá±áá¬ááŒáá·áº áá¯ááºáá±á¬ááºááá¯ááºá á±ááŒááºážááŒáá·áº á€ááŒá¿áá¬ááᯠááŒá±ááŸááºážáá±ážáá«áááºá
á á»á±ážááœááºááœáẠá¡ááá·áºááá¯ááºážááᯠá¡áá»á¯á¶ážáááºááá·áº áá±áá¬ááŒáá·áº áá¯ááºáá±á¬ááºááẠáááááá¬áá»á¬ážá áœá¬ ááŸááááº- áá±áá¬á á¡ááœááºá¡ááŒááºá០á¡ááœááºá¡áá áá«ááá¯ááºáá¬áá¯ááºá¡ááœá²á·á¡ááœáẠáááºááŸáºáá¯ááºáá áºáá¯á¡áá ááŒá áºáááºá áááºážááá¯á·ááᯠá¡áá¯á¶ážááŒá¯ááẠáá¯á¶ážááŒááºáá»ááºááẠá¡ááºáá»ááºáá®áá¬áá áºáŠážá០áá¯á¶ážááŒááºáá»ááºáá»áááºááŸá¬ á¡áá±ážááŒá®ážááẠ- áááºážááẠáá±ááºáááºáá±á¬ááŒá±á¬áá·áºááá¯ááºáá² áá¯ááºáááºážá ááºááœáẠá¡ááŒá¬ážáá«áááºáá°áá»á¬ážáá¡áá¯ááºááᯠá¡ááŸááºáááẠáá°áá®áá±ážáá±á¬ááŒá±á¬áá·áºááŒá áºáááºá
ááááá¯ážáá»á¡á¬ážááŒáá·áº- áá¯áá¹ááá®áá áºáá¯ááẠBI ááŸáá·áº ETL á¡ááŒá¬áž áá»áááºáááºááŸá¯ááŒá¯áá¯ááºááẠááá¯á¡ááºáá«á- áá±áá¬ááœáá·áºááŒááºážááŸáá·áº á¡á á®áááºáá¶á á¬áá»á¬ážááᯠá¡ááºááááºáá¯ááºáá±áá«áá á€áááºááŸá¬ Data Engineer ááŸáá·áº ááá¯ááºááœááºááŒá±ááŸááºážáááá·áº áá¬áá¬ááºá¡ááœá±á¡ááŸá áºá¡ááŒá±áá¶á¡á¯ááºááŒá áºááŒá áºááẠ(á¡ááœá²á·ááœáẠáááá¯áá¬áá áºáŠážáááºážááŸááá»áŸáẠáá±á¬ááºážáááº)á
Data Engineer á áá¬áááºáá»á¬áž
- áá±áá¬áá¯ááºáááºážá ááºááá¯ááºáᬠá¡ááŒá±áá¶á¡áá±á¬ááºá¡á¡á¯á¶áá»á¬áž ááœá¶á·ááŒáá¯ážááá¯ážáááºáá±ážá áááºáá±á¬ááºáá±ážááŸáá·áº ááŒá¯ááŒááºááááºážááááºážááŒááºážá
- á¡ááŸá¬ážá¡ááœááºážáá»á¬ážááᯠááá¯ááºááœááºááŒá±ááŸááºážááŒá®áž áá¯á¶ááŒááºá áááºáá»ááá±á¬ áá±áá¬á á®áá¶áá±á¬ááºááœááºáá±ážááá·áº ááá¯ááºááá¯ááºážáá»á¬áž áááºáá®ážááŒááºážá
- á¡áá»áá¯ážáá»áá¯ážáá±á¬ ááá¯ááºážááá áºáááºážááŒá áºáá»á¬ážá០ááœá²á·á ááºážáá¯á¶áááŸááá±á¬ á¡áá»ááºá¡áááºáá»á¬ážááᯠáá±á·áá¬áá¯á¶ážáááºáá°áá»á¬ážá á¡áá¯ááºá¡ááœáẠááá¯á¡ááºááá·áºáá¯á¶á á¶ááá¯á· áá°áá±á¬ááºáá¬áááºá
- áá±áᬠáááááºáááºážááŸáá·áº á¡áááºá¡ááœá±ážááᯠááŒáŸáá·áºáááºááẠá¡ááŒá¶ááŒá¯áá»ááºáá»á¬áž áá±ážááŒááºážá
- áá±áá¬áááá¹áá¶ááá¬ááŸááºáá»á¬ážááŸáá·áº áá±áá¬ááœá²ááŒááºážá áááºááŒá¬áá°áá»á¬áž á¡áá¯á¶ážááŒá¯ááá·áº áá±áá¬áááá¯áá¬ááᯠáá¶á·ááá¯ážááááºážááááºážááŒááºážá
- áááºááááºáž ááá¯á·ááá¯áẠáá¬ááŸáá·áºáá»á®áá±á¬ áá¬áá¬áá»á¬áž ááŒáá·áºáá±áá¬ážáá±á¬ á¡á á¯á¡áá±ážááœáẠáá±áá¬áá»á¬ážááᯠáááááºáááºážááŸáá·áº áááá±á¬ááºá áœá¬ á á®áá¶ááŒá®áž ááááºážáááºážáá«á
- á¡ááŸá±á¬áá·áºá¡ááŸááºáá»á¬ážááᯠááŸááºáááºááá¯ááºááá·áº ááá¯ážááŸááºážáá±á¬áºáááºáž ááá¯ááºáá¶á·áá±á¬ áááá¯áá¬áááºáá¬áá»á¬áž áááºáá®ážááẠáááááá¬áá»á¬ážá áááºážááá¬ááá¯ááºáᬠá¡áá±ážá¡áá°áá»á¬ážááᯠá¡áá²ááŒááºáá«á
- áá±áá¬á á®ážáááºážááŸá¯ááŸáá·áº áááºá ááºá áá áºáá»á¬ážááᯠááááºážáá»á¯ááºááŒááºážááŸáá·áº áá¶á·ááá¯ážáá±ážááŒááºáž (á á±á¬áá·áºááŒáá·áºááŒááºážááŸáá·áº ááááá±ážáá»ááºáá»á¬ážááᯠá áá áºááá·áºááœááºážááŒááºáž)á
Data Engineer trajectory ááœáẠá¡ááŒá¬ážáá±á¬ á¡áá°ážááŒá¯áá»ááºáá áºáá¯ááŸáááẠ- ML engineerá á¡ááá¯áá»á¯ááºááŒá±á¬ááá»áŸáẠá€á¡ááºáá»ááºáá®áá¬áá»á¬ážááẠá ááºááá¯ááºážááá¯ááºáᬠáááºáá°ááŸá¯áá¯á¶á á¶áá»á¬ážááᯠá ááºááŸá¯áá¯ááºáááºážá¡áá±á¬ááºá¡áááºáá±á¬áºááŒááºážááŸáá·áº á¡áá¯á¶ážááŒá¯ááŒááºážááœáẠá¡áá°ážááŒá¯áá«áááºá áááŒá¬ááááá¯áááá¯á áá±áá¬áááá¹áá¶ááá¬ááŸááºáá¶ááŸáááŸááá±á¬áá¯á¶á á¶ááẠáá±á·áá¬ááŸá¯áá áºáá¯ááá áºá áááºáá áºááá¯ááºážááŒá áºááŒá®áž ááá¯ááºááœá²á¡ááŒá±á¡áá±áá»á¬ážááœáẠá¡áá¯ááºáááŒá áºááá¯ááºáá«á
Data Scientist á áá¬áááºáá»á¬áž
- á ááºáááºáá°ááŸá¯ á¡ááºáááá¯áá®áááºáá»á¬ážááᯠá¡áá¯á¶ážááŒá¯ááẠáá±áá¬áá»á¬ážá០á¡ááºá¹áá«áááºáá»á¬ážááᯠáá¯ááºáá°ááŒááºážá
- áá±áá¬áá»á¬ážááœáẠáá¯á¶á á¶áá»á¬ážááᯠááá·áºááŸááºážááŒá®áž á¡áá»áá¯ážá¡á á¬ážááœá²ááẠá¡áá»áá¯ážáá»áá¯ážáá±á¬ á ááºáááºáá°ááŸá¯áááááá¬áá»á¬ážááᯠá¡áá¯á¶ážááŒá¯ááŒááºážá
- áá»áááºááŸáááŒááºážááŸáá·áº á¡ááºáááá¯áá®áááºáá»á¬ážááᯠá¡áá±á¬ááºážáá¯á¶ážááŒá áºá¡á±á¬áẠááŒá¯áá¯ááºááŒááºážááŒáá·áº á ááºáááºáá°ááŸá¯ á¡ááºáááá¯áá®áááºáá»á¬ážá á áœááºážáá±á¬ááºáááºááŸáá·áº áááá»ááŸá¯ááᯠááŒáŸáá·áºáááºááŒááºážá
- á ááºážáááºáááºááá¯á¡ááºááá·áºáá¯áá¹ááá®ááá»á°áá¬ááŸáá·áºá¡áá® "ááá¯ááºáá¬áá±á¬" á¡áá°á¡ááá»á¬ážááœá²á·á ááºážááŒááºážá
Data Engineer ááŸáá·áº Data Scientist ááŸá áºáŠážá áá¯á¶ážááẠáá¯áá¹ááá®áá áºáá¯á០á¡ááá¯á¡ááŒááºáá»á¬áž ááá¯á·ááá¯áẠáá¯ááºáá»á ááááºáá»á¬ážááᯠáá»áŸá±á¬á·áá»áá±ážááá·áºááŸáááá·áº áá±áá¬áááºáá»á±ážááŸá¯ ááœá¶á·ááŒáá¯ážááá¯ážáááºáá±ážááœáẠááŒááºáá¬áááºáá¬ááŸááá±á¬ áá¶á·ááá¯ážáá°áá®ááŸá¯áá»á¬áž áá»áŸáá±ááŒáááºá
á¡ááºáá»ááºáá®áá¬áá»á¬ážááŸáá·áº áááá¹áá¶ááá¬ááŸááºáá»á¬ážááẠáááºááá·áºáá¬áá¬á áá¬ážááŸáá·áº áááááá¬áá»á¬ážááŒáá·áº á¡áá¯ááºáá¯ááºááááºážá
ááá±á·áá±ááºááœáẠáá±áá¬áááá¹áá¶ááá¬ááŸááºáá»á¬ážá áá»áŸá±á¬áºááá·áºáá»ááºáá»á¬áž ááŒá±á¬ááºážáá²áá¬áá²á·áááºá ááááºá á¡ááºáá»ááºáá®áá¬áá»á¬ážááẠááŒá®ážáá¬ážáá±á¬ SQL áá±ážááŒááºážááŸá¯áá»á¬ážááᯠá á¯áá±á¬ááºážáᬠMapReduce ááŸáá·áº Informatica ETLá Pentaho ETLá Talend áá²á·ááá¯á·áá±á¬ áááááá¬áá»á¬ážááᯠá¡áá¯á¶ážááŒá¯á MapReduce áá±áá¬ááᯠááá¯ááºááá¯ááºáá±ážáá¬ážááŒá®áž áá¯ááºáá±á¬ááºáá²á·áááºá
2020 áá¯ááŸá áºááœáẠáá»áœááºážáá»ááºáá°áá áºáŠážááẠPython ááŸáá·áº áá±ááºáá®ááœááºáá»ááºááŸá¯áááááá¬áá»á¬áž (á¥ááá¬á Airflow)á cloud ááááºáá±á¬ááºážáá»á¬ážááŸáá·áº áá¯ááºáá±á¬ááºááŒááºážááá¯ááºáᬠá¡ááŒá±áá¶áá°áá»á¬ážááᯠáá¬ážáááºááŒááºáž (áááºážááá¯á·ááᯠáá¬á·ááºáá²áá±á«áºááœáẠáá»áœá±áá¬áááºá áá¯á¶ááŒá¯á¶áá±ážáá°áá»á¬ážááᯠáá±á·áá¬áá±á ááº) ááœáẠá¡áá¯á¶ážááŒá¯ááááá«á
SAPá Oracleá MySQLá Redis ááẠáá¯áá¹ááá®ááŒá®ážáá»á¬ážááœáẠáá±áá¬á¡ááºáá»ááºáá®áá¬áá»á¬ážá¡ááœáẠááá¯ážáá¬áááááá¬áá»á¬ážááŒá áºáááºá áááºážááá¯á·ááẠáá±á¬ááºážááœááºáá±á¬áºáááºáž ááá¯ááºá ááºáá»á¬ážá áá¯ááºáá»á ááááºááẠá¡ááœááºááŒáá·áºáá¬ážáá±á¬ááŒá±á¬áá·áº áááºážááá¯á·ááŸáá·áº á¡áá¯ááºáá¯ááºááẠáááºáá°ááŒááºážááẠá ááºááŸá¯ááá±á¬áá»ááºáá»á¬ážááœááºáᬠá¡áááá¹áá«ááºááŸáá á±áááºá áá áºáá»áááºáááºážááŸá¬áááºá Postgres áá¯á¶á á¶ááŒáá·áº á¡ááá²á· á¡ááŒá¬ážááœá±ážáá»ááºá áá¬áá áºáᯠááŸáááẠ- áááºážááẠá¡ááá²á·ááŒá áºááŒá®áž áá±á·áá»áá·áºááŸá¯á¡ááœááºáá¬áá ááá·áºáá»á±á¬áºáá«áááºá
áááá¯ááºážááŒá±á¬ááºážá¡áá áááºážááá¬áá»á¬ážááŸáá·áº áá»ááºážáááºááŸá¯áá»á¬áž ááœá¶á·ááŒáá¯ážáá¬áááºááŸáá·áºá¡áá»áŸ Java ááŸáá·áº Scala á¡ááœáẠáá±á¬ááºážááá¯ááŸá¯áá»á¬ážááᯠáááŒá¬áá ááœá±á·ááá±á¬áºáááºážá á€áá¬áá¬á
áá¬ážáá»á¬ážááẠáá±á¬ááºáá¶ááœáẠááœááºáá»á±á¬ááºááœá¬ážáááºá
ááá¯á·áá±á¬áºá á¡áá¬áᶠBigData- Hadoopá Spark ááŸáá·áº á¡ááŒá¬ážáááá á¹áá¬ááºáá¯á¶áá»á¬ážááẠáá±áá¬á¡ááºáá»ááºáá®áá¬á¡ááœáẠááá¯á¡ááºáá»ááºááá¯ááºáá±á¬á·áá² ááá¬ážááá¯ážáá» ETL á áááŒá±ááŸááºážááá¯ááºáá±á¬ ááŒá¿áá¬áá»á¬ážááᯠááŒá±ááŸááºážááá¯ááºáá±á¬ áááááá¬áá áºáá»áá¯ážááŒá áºáááºá
áááºážááŒá±á¬ááºážáá áºááẠáááºážááá¯á·áá±ážáá¬ážáá¬ážáá±á¬ áá¬áá¬á áá¬ážááᯠá¡ááááá¬áááŸááá² áááááá¬áá»á¬ážááᯠá¡áá¯á¶ážááŒá¯ááŒááºážá¡ááœáẠáááºáá±á¬ááºááŸá¯áá»á¬áž (á¥ááá¬á Hadoop ááẠJava á¡ááááá¬áááŸááá²) á¡ááŒáẠááá¯ááºááá¯ááºáá¯ááºááœáŸáá·áºááŒááºážáá±áá¬ááᯠáá¯ááºáá±á¬ááºáááºá¡ááœáẠá¡áááºááá·áºááŒá¯áá¯ááºáá¬ážáá±á¬ áááºáá±á¬ááºááŸá¯áá»á¬áž (á¡áá¶ááŒáá·áº á¡ááá¡ááŸááºááŒá¯ááŒááºáž ááá¯á·ááá¯áẠáá®áá®ááá¯ááœáẠáá¯ááºáá¯á¶á¡ááá¡ááŸááºááŒá¯ááŒááºáž) )
SAS ááŸáá·áº SPSS ááá¯á·á០á ááºááŸá¯ááŒá±ááŸááºážáá»ááºáá»á¬ážááẠáá°ááŒáá¯ááºáá»á¬ážááŒá®áž Tableauá Rapidminerá Stata ááŸáá·áº Julia ááá¯á·ááᯠáá±áááá¯ááºáá¬áá¯ááºáááºážáá»á¬ážá¡ááœáẠáá±áá¬áááá¹áá¶ááá¬ááŸááºáá»á¬ážá ááœááºáá»ááºá áœá¬ á¡áá¯á¶ážááŒá¯ááŒáááºá
ááá¯ááºááá¯ááºážáá»á¬áž ááá¯ááºááá¯ááºáááºáá±á¬ááºááá¯ááºááŸá¯ááẠáááºážá
á
áºáá°áá»á¬ážááŸáá·áº áá±áá¬áááá¹áá¶ááá¬ááŸááºáá»á¬ážáᶠááœááºáá²á·áá±á¬ááŸá
áºá¡áááºážáááºááᬠáá±á«áºááœááºáá²á·áááº- á¥ááá¬á ááá¯ážááŸááºážáá±á¬ scripts áá»á¬ážááᯠá¡áá¯á¶ážááŒá¯á PostgreSQL-based ááá¯ááŸá±á¬ááºááŸá¯ááá¯á· áá±áá¬áá±ážááá¯á·ááá¯ááºáá±ááŒá®ááŒá
áºáááºá
áá¯á¶ááŸááºá¡á¬ážááŒáá·áºá ááá¯ááºááá¯ááºážáá»á¬ážááŸáá·áº áá±á«ááºážá ááºáá±áá¬ááœá²á·á ááºážáá¯á¶áá»á¬ážááᯠá¡áá¯á¶ážááŒá¯ááŒááºážááẠáá±áá¬á¡ááºáá»ááºáá®áá¬áá»á¬ážá áá¬áááºáá¬ááŒá áºáááºá ááá¯á·áá±á¬áº ááá±á·áá±ááºááœááºá áááºá ááºáááºáááºáá»á¬ážááœáẠáá»ááºááŒáá·áºáá±á¬á¡áááºá¡áá»ááºážáá»á¬ážááŸááá±á¬ T-shaped á¡áá°ážáá¯áá»á¬ážá¡ááœáẠáááºážááŒá±á¬ááºážááẠááááºáááẠááá¯ááá¯á¡á¬ážáá±á¬ááºážáá¬áá±á¬ááŒá±á¬áá·áºá áááááá¬áá»á¬ážááẠá¡ááŒá²ááá¯ážááŸááºážáá±áá«áááºá
Data Engineer ááŸáá·áº Data Scientist ááá¯á·ááẠá¡áááºááŒá±á¬áá·áº á¡áá°ááᜠáá¯ááºáá±á¬ááºááŒááááºážá
á¡ááºáá»ááºáá®áá¬áá»á¬ážááŸáá·áº áá®ážáá®ážáááºáááºáá¯ááºáá±á¬ááºááŒááºážááŒáá·áº Data Scientists áá»á¬ážááẠáá¯áá±áááááºááœáẠá¡á¬áá¯á¶á
áá¯ááºááá¯ááºááŒá®áž áá¯ááºáá¯ááºááŸá¯á¡ááá·áºááŸááá±á¬ machine learning algorithms ááᯠáááºáá®ážááá¯ááºáááºá
ááá±á¬áá»ááºáá
áºáá¯á
á®ááŸá áá±áá¬á¡áááºááŸáá·áº á¡ááœááºááá¯ááºááá¯ááºážáá»á¬ážááẠááá¹áá¬áá¯á¶ážááá¯ááºáᬠáááá¯áá¬áááºáá¬áá»á¬ážááŸáá·áº ááá¯ááºáá®ááŒá±á¬ááºáž áá±áá»á¬á
á±áááºá¡ááœáẠá¡ááºáá»ááºáá®áá¬áá»á¬ážááẠáá»á²á·ááœááºááá¯ááºááŸá¯á áá±áá¬ááŒááºáá¯á¶ážáááºááá¯á·ááᯠá¡á¬áá¯á¶á
áá¯ááºááẠááá¯á¡ááºáááºá
á€áá¬áááºáá»á¬ážááᯠááœá²áá¯ááºááŒááºážááẠááá°áá®áá±á¬ á ááºáááºáá°ááŸá¯ááá±á¬áá»ááºáá»á¬ážááœáẠáá¯ááºáá±á¬ááºáá±áá±á¬ á¡ááœá²á·áá»á¬ážá¡ááŒá¬áž áá®ááœááºááŸá¯ááᯠáá±áá»á¬á á±áááºá
áá°ážáá±á«ááºážáá±á¬ááºááœááºááŒááºážááẠáá¯ááºáá¯ááºá¡áá áºáá»á¬ážááᯠáááá±á¬ááºá áœá¬áááºáá®ážááẠáá°áá®áá±ážáááºá áá°ááá¯ááºážá¡ááœáẠáááºáá±á¬ááºááŸá¯áá áºáá¯áááºáá®ážááŒááºáž (ááá¹áá¬áá¯á¶ážááá¯ááºáᬠááá¯ááŸá±á¬ááºááŸá¯ ááá¯á·ááá¯áẠáááºááŸáºáá¯ááºáá»á¬áž áá±á«ááºážá ááºážááŒááºáž) ááŸáá·áº áá®ážááŒá¬ážááá¯á¡ááºáá»áẠááá¯á·ááá¯áẠááá±á¬áá»ááºáá áºáá¯á á®ááᯠá¡áá±á¬ááºá¡áááºáá±á¬áºááŒááºáž (á¡ááœááºá¡áá°ážááŒá¯áá¬ážáá±á¬ ááá¯ááºááá¯ááºážá ááŒááºáá¡áááºážá¡ááŒá áºáá»á¬ážááᯠáá»áááºáááºááŒááºáž) ááá¯á·á¡ááŒá¬áž ááŒááºááŸá¯ááºážááŸáá·áº á¡áááºá¡ááœá±ážááᯠáááŸááááºá
áá±áá¬áááá¹áá¶ááá¬ááŸááºáá»á¬ážááŸáá·áº ááœá²ááŒááºážá áááºááŒá¬áá°áá»á¬ážááŸáá·áº áá®ážáá®ážáááºáááºáá¯ááºáá±á¬ááºááŒááºážááẠá¡ááºáá»ááºáá®áá¬áá»á¬ážá¡á¬áž ááá¯ááá¯áá±á¬ááºážááœááºáá±á¬áá¯ááºáá±ážááẠááœá²ááŒááºážá áááºááŒá¬ááŸá¯ááŸáá·áº áá¯áá±ááá áœááºážáááºáá»á¬áž ááá¯ážáááºá á±ááẠáá°áá®áá±ážáá«áááºá ááá¯áá±á«ááºááŸáá·áº áá±áá¬á¡áá¯ááºá¡áá¯á¶ážááŒá¯áá°áá»á¬ážá¡ááŒá¬áž á¡ááááá¬áá»áŸáá±ááŒááºážááẠááá¯ážáááºáá±á¬ááºážááœááºá á±ááŒá®áž ááá±á¬áá»ááºáá»á¬ážááᯠááá¯ááá¯áá»ááºááŒááºá á±ááŒá®áž áá±ááŸááºáááºáá¶á·áá±á¬ááááºáá»á¬ážááᯠáá±ážáá±á¬ááºáááºá
Data ááŸáá·áº á¡áá¯ááºáá¯ááºáá±á¬ áááºáá»á±ážááŸá¯ááᯠááœá¶á·ááŒáá¯ážááá¯ážáááºá á±ááẠáááºááœááºáá±á¬ áá¯áá¹ááá®áá»á¬ážááœáẠáááºážááá¯á·ááᯠá¡ááŒá±áá¶á áá¯ááºáááºážáá¯ááºáááºážá ááºáá»á¬áž áááºáá±á¬ááºáá¬ááœáẠData Scientist ááŸáá·áº Data Engineer ááá¯á·ááẠáá áºáá¯ááŸáá·áºáá áºáᯠááŒáá·áºá áœááºááŒá®áž ááŒá®ážááŒáá·áºá á¯á¶áá±á¬ áá±áá¬ááœá²ááŒááºážá áááºááŒá¬ááŸá¯á áá áºáá áºáá¯ááᯠáááºáá®ážáá«á
áá±á¬ááºáá±á¬ááºážáá«ážááŸá¬áá±á¬á· Data Engineer áá²á· Data Scientists ááœá±ááŸá¬ áááºááá¯ááá¬áááºáá»áá¯ážááœá±ááŸáááá·áºááá²á áááºááá¯á¡áááºá¡áá»ááºážááœá± ááœá¶á·ááŒáá¯ážááá¯ážáááºááá¯á· ááá¯á¡ááºááá²á á á»á±ážááœááºá áááºááá¯á¡áá¯ááºáá¯ááºáá²ááá¯áá¬ááᯠááœá±ážááœá±ážááœá¬ážááŸá¬áá«á
Netology á á¡ááºáá®áá¬áá»á¬ážáá¶á០ááááááºá
á¡áááºá áááºááẠData Engineer ááá¯á·ááá¯áẠData Scientist á á¡áááºááœá±ážáááºážááŒá±á¬ááºážááᯠááŒáá·áºááŸá¯áá«áá áá»áœááºá¯ááºááá¯á·á áááºáááºážá¡á á®á¡á ááºáá»á¬ážááᯠáá±á·áá¬ááẠááá·áºá¡á¬áž ááááºáá±á«áºá¡ááºáá«áááºá
- âá¡áááºááœá±ážáááºážáá»á±á¬ááºážá"á
- âá¡áááºááœá±ážáááºážáá»á±á¬ááºážá"á
source: www.habr.com