BashkĂ« me Elena GerasimovĂ«n, drejtoren e fakultetit ââ, nĂ« Netology po vazhdojmĂ« tĂ« shqyrtojmĂ« se si ndĂ«rveprojnĂ« dhe çfarĂ« ndryshimesh ka mes Data Scientist dhe Data Engineer.
Në pjesën e parë thamë .
NĂ« kĂ«tĂ« material do tĂ« flasim pĂ«r njohuritĂ« dhe aftĂ«sitĂ« qĂ« duhet tĂ« kenĂ« specialistĂ«t, cilat diplojata vlerĂ«sohen nga punĂ«dhĂ«nĂ«sit, si zhvillohen intervistat, si dhe sa fitojnĂ« inxhinierĂ«t dhe shkencĂ«tarĂ«t e tĂ« dhĂ«nave.Â
Cfarë duhet të dinë shkencëtarët dhe inxhinierët
Arsimi i specializuar për të dy specialistët është Computer Science.
Ădo specialist nĂ« fushĂ«n e tĂ« dhĂ«nave, qoftĂ« shkencĂ«tar ose analist, duhet tĂ« jetĂ« nĂ« gjendje tĂ« dĂ«shmojĂ« saktĂ«sinĂ« e pĂ«rfundimeve tĂ« tij. PĂ«r kĂ«tĂ« Ă«shtĂ« e domosdoshme tĂ« njohĂ« statistikĂ«n dhe matematikĂ«n bazĂ« tĂ« lidhur me statistikĂ«n..
Mësimi i makinerive dhe mjetet për analizën e të dhënave janë të pazëvendësueshme në botën moderne. Nëse mjetet e zakonshme nuk janë të disponueshme, duhet të keni aftësi për të mësuarit e shpejtë të mjeteve të reja, duke krijuar skripte të thjeshta për automatizimin e detyrave..
ĂshtĂ« e rĂ«ndĂ«sishme tĂ« theksohet se njĂ« specialist pĂ«r punĂ«n me tĂ« dhĂ«nat duhet tĂ« komunikojĂ« nĂ« mĂ«nyrĂ« efektive rezultatet e analizĂ«s. NĂ« kĂ«tĂ« do ta ndihmojĂ« visualizimi i tĂ« dhĂ«nave ose rezultatet e hulumtimeve tĂ« kryera dhe verifikimin e hipotezave. SpecialistĂ«t duhet tĂ« jenĂ« nĂ« gjendje tĂ« krijojnĂ« diagrame dhe grafike, tĂ« pĂ«rdorin mjete vizualizimi, tĂ« kuptojnĂ« dhe shpjegojnĂ« tĂ« dhĂ«nat nga tabelat e kontrollit.
Për inxhinierin e të dhënave, tri drejtime dalin në plan të parë.
Algoritmet dhe strukturat e tĂ« dhĂ«nave. ĂshtĂ« e rĂ«ndĂ«sishme tĂ« bĂ«heni tĂ« zot nĂ« shkrimin e kodit dhe pĂ«rdorimin e strukturave dhe algoritmeve bazĂ«:
- analiza e kompleksitetit të algoritmeve,
- aftĂ«sia pĂ«r tĂ« shkruar kod tĂ« qartĂ« dhe tĂ« mirĂ«mbajtur,Â
- procesimi me grupe,
- përpunimi në kohë reale.
Baza dhe depozitat e të dhënave, Business Intelligence:
- ruajtja dhe përpunimi i të dhënave,
- projektimi i sistemeve të integruara,
- Data Ingestion,
- sistemet e skedarëve të shpërndara.
Hadoop dhe Big Data. Të dhënat po bëhen gjithnjë e më të shumta, dhe në horizontin 3-5 vjet këto teknologji do të jenë të nevojshme për çdo inxhinier. Plus:
- Data Lakes,
- punimi me ofruesit e cloud.
Mësimi i makinerisë do të përdoret gjerësisht, dhe është e rëndësishme të kuptohet se cilat detyra biznesi do të ndihmojë për zgjidhje. Nuk është e nevojshme të dini si të krijoni modele (kështu do t'u ndihmojnë shkencëtarët e të dhënave), por duhet të kuptoni aplikimet e tyre dhe kërkesat përkatëse.
Sa fitojnë inxhinierët dhe shkencëtarët
Të ardhurat e inxhinierëve të përpunimit të të dhënave
NĂ« praktikĂ«n ndĂ«rkombĂ«tare pagĂ« fillestare zakonisht Ă«shtĂ« rreth $100,000 nĂ« vit dhe rritet ndjeshĂ«m me eksperiencĂ«n, sipas tĂ« dhĂ«nave nga Glassdoor. PĂ«r mĂ« tepĂ«r, kompanitĂ« shpesh ofrojnĂ« mundĂ«si aksionesh dhe bonuse prej 5â15% çdo vit.
Në Rusi në fillim të karrierës, paga zakonisht nuk është më e vogël se 50,000 rubla në rajone dhe 80,000 në Moskë. Në këtë fazë nuk kërkohet eksperiencë, përveç që kemi kaluar trajnimin.
Pas 1â2 viteve pune â rreth 90â100,000 rubla.
Rruga rritet nĂ« 120â160,000 pas 2â5 viteve. Shtohen faktorĂ« tĂ« tillĂ« si specializimi i kompanive tĂ« mĂ«parshme, madhĂ«sia e projekteve, puna me big data dhe tĂ« tjera.
Pas 5 vitesh pune, është më e lehtë të kërkoni vende pune në departamente të ngjashme ose të aplikoni për pozita të tilla të specializuara si:
- Arkitekt ose zhvillues i lartĂ« nĂ« njĂ« bankĂ« ose telekom â rreth 250,000.
- Para shitjet nĂ« vĂ«nd, me teknologjitĂ« me tĂ« cilat keni punuar mĂ« ngushtĂ«, Ă«shtĂ« 200 mijĂ« plus njĂ« bonus i mundshĂ«m (1â1,5 milion rubla).Â
- Ekspertët për implementimin e aplikacioneve të biznesit Enterprise, si SAP, deri në 350 mijë.
Të ardhurat e data-scientistëve.
Tregu i analistĂ«ve nga kompania 'KĂ«rkime Normale' dhe agjencia rekrutimi New.HR tregon se specialistĂ«t e Data Science fitojnĂ« mesatarisht paga mĂ« tĂ« larta se analistĂ«t e specialiteteve tĂ« tjera.Â
NĂ« Rusi, pagat fillestare pĂ«r data-scientistĂ«t me deri nĂ« njĂ« vit pĂ«rvojĂ« janĂ« nga 113 mijĂ« rubla.Â
Si përvojë punë tani gjithashtu merret parasysh përfundimi i programeve të trajnimit.
Pas 1â2 vjetĂ«sh, ky specialist mund tĂ« fitojĂ« deri nĂ« 160 mijĂ«.
PĂ«r njĂ« punonjĂ«s me pĂ«rvojĂ« pune prej 4â5 vjetĂ«sh, skala rritet deri nĂ« 310 mijĂ«.
Si zhvillohen intervistat.
Në perëndim, diplomantët e programeve të trajnimit profesional kalojnë intervistën e parë në mesatare rreth 5 javë pas përfundimit të trajnimit. Rreth 85% gjejnë punë brenda 3 muajve.
Procesi i kalimit të intervistave për pozitat e inxhinierit të të dhënave dhe data-scientistit praktikisht nuk ndryshon. Zakonisht përbëhet nga pesë etapa.
Curriculum Vitae. Kandidatët me përvojë të mëparshme që nuk është në profil (p.sh., nga marketingu) duhet të përgatisin një letër shoqëruese të detajuar për çdo kompani ose të kenë rekomandime nga përfaqësuesi i kësaj kompanie.
Screening teknik. Përgjithësisht zhvillohet në telefon. Kjo përfshin një deri në dy pyetje të komplikuara dhe një numër të tillë pyetjesh të thjeshta që lidhen me stakun aktual të punëdhënësit.
Intervistë HR. Mund të zhvillohet në telefon. Në këtë fazë, kandidati vlerësohet për përgjegjshmërinë dhe aftësinë për t'u komunikuar.
Intervistë teknike. Shpesh zhvillohet në person. Në kompani të ndryshme, niveli i pozitat në listën e punonjësve ndryshon dhe emrat e pozita mund të jenë të ndryshëm. Prandaj, në këtë fazë kontrollohen njohuritë teknike.
IntervistĂ« me drejtorin teknik / arkitektin kryesor. InxhinierĂ«t dhe shkencĂ«tarĂ«t janĂ« pozita strategjike dhe pĂ«r shumĂ« kompanitĂ« nĂ« tĂ« njĂ«jtĂ«n kohĂ« janĂ« tĂ« reja. ĂshtĂ« e rĂ«ndĂ«sishme qĂ« kolegu potencial tĂ« pĂ«lqehet nga drejtori dhe tĂ« pĂ«rputhet me mendimet e tij.
ĂfarĂ« mund tĂ« ndihmojĂ« shkencĂ«tarĂ«t dhe inxhinierĂ«t nĂ« rritjen e karrierĂ«s
Ka shumĂ« mjete tĂ« reja pĂ«r punĂ«n me tĂ« dhĂ«na. Dhe pak kush e kupton njĂ«soj mirĂ« tĂ« gjitha.Â
Shumë kompani nuk janë të gatshme të punësojnë individë pa përvojë pune. Sidoqoftë, kandidatët me bazë minimale dhe njohuri të thella të mjeteve të njohura mund të fitojnë përvojën e nevojshme nëse mësojnë dhe zhvillohen vetë.
Cilat janë cilësitë e dobishme për inxhinierët e të dhënave dhe shkencëtarët e të dhënave
Dëshira dhe aftësia për të mësuar. Nuk është e nevojshme të kërkoni përvojë menjëherë ose të ndryshoni punë për një mjet të ri, por duhet të jeni të gatshëm të kaloni në një fushë të re.
Tendenca për automatizimin e proceseve rutinore. Kjo është e rëndësishme jo vetëm për produktivitetin, por edhe për ruajtjen e cilësisë së lartë të të dhënave dhe shpejtësinë e dorëzimit të tyre për konsumatorin.
Kujdesi dhe kuptimi i «çfarë ndodhi nën kapak» në proceset. Specialistët që kanë përvojë dhe njohuri të thella për proceset do ta zgjidhin problemin më shpejt.
PĂ«rveç njohjes sĂ« shkĂ«lqyer tĂ« algoritmeve, strukturave tĂ« tĂ« dhĂ«nave dhe pipeline-ve, Ă«shtĂ« e nevojshme tĂ« mĂ«sohet tĂ« mendoni nĂ« produkte â tĂ« shihni arkitekturĂ«n dhe zgjidhjet biznesore si njĂ« tablo tĂ« vetme.Â
Për shembull, është e dobishme të marrësh ndonjë shërbim të njohur dhe të krijosh një bazë të dhënash për të. Pastaj, mendo se si të zhvillosh ETL dhe DW që do ta mbushin atë me të dhëna, cilët do të jenë konsumatorët dhe çfarë është e rëndësishme për ta të dinë rreth të dhënave, si dhe si bashkëveprojnë blerësit me aplikacionet: për të gjetur punë dhe për takime, për qira makinash, aplikacion për podkaste, platformë edukative.
Pozitat e analistit, data scientist dhe inxhinierit janë shumë të afërta, prandaj kalimi nga një drejtim në tjetrin mund të bëhet më shpejt sesa në fushat e tjera.
NĂ« çdo rast, ata qĂ« kanĂ« ndonjĂ« sfond IT do t'u jetĂ« mĂ« e lehtĂ« se sa atyre qĂ« nuk e kanĂ« atĂ«. NĂ« mesatare, njerĂ«zit e motivuar mĂ«sues ndryshojnĂ« punĂ« çdo 1.5-2 vjet. ĂshtĂ« mĂ« e lehtĂ« pĂ«r ata qĂ« studiojnĂ« nĂ« grup dhe me njĂ« mentor, krahasuar me ata qĂ« mbĂ«shteten vetĂ«m nĂ« burime tĂ« hapura.
Nga redaksia e Netologjisë
Nëse po shqyrtoni profesionin e Data Engineer ose Data Scientist, ju ftojmë të shqyrtoni programet tona të kurseve:
- Profili "». Â
- Profili "».
- Kursi "».
Burimi: habr.com
