Inġinier tad-Data u Xjentist tad-Data: x'jistgħu jagħmlu u kemm jaqilgħu

Flimkien ma 'Elena Gerasimova, kap tal-fakultà "Xjenza tad-Data u Analitika» fin-Netoloġija nkomplu nifhmu kif jinteraġixxu ma’ xulxin u kif ix-Xjentisti tad-Data u l-Inġiniera tad-Data huma differenti.

Fl-ewwel parti qalu dwar id-differenzi ewlenin bejn Data Xjentist u Data Engineer.

F'dan il-materjal se nitkellmu dwar x'għerf u ħiliet għandu jkollhom l-ispeċjalisti, liema edukazzjoni hija vvalutata minn min iħaddem, kif isiru l-intervisti, u kemm jaqilgħu l-inġiniera tad-dejta u x-xjenzati tad-dejta. 

X'għandhom ikunu jafu x-xjentisti u l-inġiniera

L-edukazzjoni speċjalizzata għaż-żewġ speċjalisti hija Xjenza tal-Kompjuter.

Inġinier tad-Data u Xjentist tad-Data: x'jistgħu jagħmlu u kemm jaqilgħu

Kwalunkwe xjenzat tad-dejta—xjenzat tad-dejta jew analista—għandu jkun kapaċi jipprova l-korrettezza tal-konklużjonijiet tiegħu. Għal dan ma tistax tagħmel mingħajr għarfien statistika u matematika bażika relatata mal-istatistika.

It-tagħlim tal-magni u l-għodod analitiċi tad-dejta huma indispensabbli fid-dinja moderna. Jekk l-għodod tas-soltu ma jkunux disponibbli, jeħtieġ li jkollok il-ħiliet malajr titgħallem għodod ġodda, toħloq skripts sempliċi biex awtomat il-kompiti.

Huwa importanti li wieħed jinnota li x-xjenzat tad-dejta għandu jikkomunika b'mod effettiv ir-riżultati tal-analiżi. Se tgħinu b'dan viżwalizzazzjoni tad-data jew ir-riżultati tar-riċerka u l-ittestjar tal-ipoteżi. L-ispeċjalisti jridu jkunu kapaċi joħolqu charts u graphs, jużaw għodod ta’ viżwalizzazzjoni, u jifhmu u jispjegaw data minn dashboards.

Inġinier tad-Data u Xjentist tad-Data: x'jistgħu jagħmlu u kemm jaqilgħu

Għal inġinier tad-dejta, tliet oqsma jiġu fuq quddiem.

Algoritmi u strutturi tad-data. Huwa importanti li ssir tajjeb biex tikteb kodiċi u tuża strutturi bażiċi u algoritmi:

  • analiżi tal-kumplessità tal-algoritmu,
  • abbiltà li tikteb kodiċi ċar u li jista' jinżamm, 
  • ipproċessar tal-lott,
  • ipproċessar f'ħin reali.

Databases u data warehouses, Business Intelligence:

  • ħażna u ipproċessar tad-data,
  • disinn ta' sistemi kompluti,
  • Inġestjoni tad-Data,
  • sistemi ta' fajls distribwiti.

Hadoop u Big Data. Hemm aktar u aktar data, u matul it-3-5 snin li ġejjin, dawn it-teknoloġiji se jsiru meħtieġa għal kull inġinier. Barra minn hekk:

  • Data Lakes
  • taħdem mal-fornituri tal-cloud.

Tagħlim bil-magna se jintuża kullimkien, u huwa importanti li wieħed jifhem liema problemi tan-negozju se jgħin biex issolvi. Mhuwiex meħtieġ li tkun tista 'tagħmel mudelli (ix-xjenzati tad-dejta jistgħu jimmaniġġjaw dan), iżda trid tifhem l-applikazzjoni tagħhom u r-rekwiżiti korrispondenti.

Kemm jaqilgħu l-inġiniera u x-xjenzati?

Dħul ta' Inġinier tad-Data

Fil-prattika internazzjonali is-salarji tal-bidu huma tipikament ta '$ 100 fis-sena u jiżdiedu b'mod sinifikanti bl-esperjenza, skond Glassdoor. Barra minn hekk, il-kumpaniji spiss jipprovdu għażliet ta 'stock u bonusijiet annwali ta' 000-5%.

Fir-Russja fil-bidu tal-karriera, is-salarju ġeneralment ikun mhux inqas minn 50 elf rublu fir-reġjuni u 80 elf f'Moska. L-ebda esperjenza għajr taħriġ komplut mhi meħtieġa f'dan l-istadju.

Wara 1-2 snin ta 'xogħol - furketta ta' 90-100 elf rublu.

Il-furketta tiżdied għal 120-160 elf fi 2-5 snin. Jiżdiedu fatturi bħall-ispeċjalizzazzjoni ta' kumpaniji preċedenti, id-daqs tal-proġetti, ix-xogħol b'data kbira, eċċ.

Wara 5 snin ta' xogħol, huwa aktar faċli li tfittex postijiet vakanti f'dipartimenti relatati jew tapplika għal pożizzjonijiet speċjalizzati ħafna bħal:

  • Perit jew żviluppatur ewlieni f'bank jew telekomunikazzjoni - madwar 250 elf.

  • Pre-Bejgħ mill-bejjiegħ li t-teknoloġiji tiegħu ħdimt magħhom l-aktar mill-qrib - 200 elf flimkien ma 'bonus possibbli (1-1,5 miljun rublu). 

  • Esperti fl-implimentazzjoni ta 'applikazzjonijiet tan-negozju Enterprise, bħal SAP - sa 350 elf.

Dħul tax-xjenzati tad-dejta

Riċerka suq ta 'analisti tal-kumpanija "Riċerka normali" u l-aġenzija ta' reklutaġġ New.HR juri li speċjalisti tax-Xjenza tad-Data jirċievu bħala medja salarju ogħla minn analisti ta 'speċjalitajiet oħra. 

Fir-Russja, is-salarju tal-bidu ta 'xjenzat tad-dejta b'sa sena ta' esperjenza huwa minn 113 elf rublu. 

It-tlestija ta' programmi ta' taħriġ issa titqies ukoll bħala esperjenza ta' xogħol.

Wara 1-2 snin, speċjalista bħal dan diġà jista 'jirċievi sa 160 elf.

Għal impjegat b'4-5 snin ta 'esperjenza, il-furketta tiżdied għal 310 elf.

Kif isiru l-intervisti?

Fil-Punent, il-gradwati ta' programmi ta' taħriġ vokazzjonali għandhom l-ewwel intervista tagħhom bħala medja 5 ġimgħat wara l-gradwazzjoni. Madwar 85% isibu impjieg wara 3 xhur.

Il-proċess tal-intervista għall-pożizzjonijiet ta 'inġinier tad-dejta u xjenzat tad-dejta huwa prattikament l-istess. Normalment jikkonsisti f'ħames stadji.

Sommarju. Kandidati b'esperjenza minn qabel mhux ċentrali (eż., marketing) huma meħtieġa jippreparaw ittra ta' kopertura dettaljata għal kull kumpanija jew ikollhom referenza minn rappreżentant ta' dik il-kumpanija.

Screening tekniku. Normalment iseħħ permezz tat-telefon. Tikkonsisti f'wieħed jew tnejn mistoqsijiet kumplessi u daqstant sempliċi relatati mal-munzell attwali ta 'min iħaddem.

Intervista HR. Jista 'jsir bit-telefon. F'dan l-istadju, il-kandidat jiġi ttestjat għall-adegwatezza ġenerali u l-kapaċità li jikkomunika.

Intervista teknika. Ħafna drabi dan iseħħ personalment. F'kumpaniji differenti, il-livell tal-pożizzjonijiet fit-tabella tal-persunal huwa differenti, u l-pożizzjonijiet jistgħu jissemmew b'mod differenti. Għalhekk, f'dan l-istadju huwa l-għarfien tekniku li jiġi ttestjat.

Intervista mas-CTO/Kap Perit. L-inġinier u x-xjenzat huma pożizzjonijiet strateġiċi, u għal ħafna kumpaniji huma wkoll ġodda. Huwa importanti li l-maniġer jħobb il-kollega potenzjali u jaqbel miegħu fl-opinjonijiet tiegħu.

X'se jgħin lix-xjenzati u lill-inġiniera fit-tkabbir tal-karriera tagħhom?

Dehru ħafna għodod ġodda biex jaħdmu bid-dejta. U ftit nies huma tajbin daqs kulħadd. 

Ħafna kumpaniji mhumiex lesti li jimpjegaw impjegati mingħajr esperjenza tax-xogħol. Madankollu, kandidati b'bażi ​​minima u għarfien tal-baŜi ta 'għodod popolari jistgħu jiksbu l-esperjenza meħtieġa jekk jitgħallmu u jiżviluppaw waħedhom.

Kwalitajiet utli għal inġinier tad-dejta u xjenzat tad-dejta

Xewqa u ħila li titgħallem. M'għandekx għalfejn tiġri immedjatament l-esperjenza jew tibdel ix-xogħol għal għodda ġdida, iżda trid tkun lest li taqleb għal qasam ġdid.

Ix-xewqa li jiġu awtomatizzati proċessi ta 'rutina. Dan huwa importanti mhux biss għall-produttività, iżda wkoll għaż-żamma tal-kwalità għolja tad-dejta u l-veloċità tal-kunsinna lill-konsumatur.

Attenzjoni u fehim ta '"dak li hemm taħt il-barnuża" tal-proċessi. Speċjalista li għandu osservazzjoni u għarfien bir-reqqa tal-proċessi se jsolvi l-problema aktar malajr.

Minbarra l-għarfien eċċellenti ta 'algoritmi, strutturi tad-dejta u pipelines, għandek bżonn titgħallem taħseb fil-prodotti — tara l-arkitettura u s-soluzzjoni tan-negozju bħala stampa waħda. 

Pereżempju, huwa utli li tieħu kwalunkwe servizz magħruf u toħroġ b'database għaliha. Imbagħad aħseb dwar kif tiżviluppa ETL u DW li jimlewha bid-dejta, x’tip ta’ konsumaturi se jkunu u x’inhu importanti għalihom li jkunu jafu dwar id-dejta, u wkoll kif ix-xerrejja jinteraġixxu ma’ applikazzjonijiet: għal tfittxija ta’ xogħol u dating, kiri ta’ karozzi , applikazzjoni tal-podcast, pjattaforma edukattiva.

Il-pożizzjonijiet ta 'analista, xjenzat tad-dejta u inġinier huma qrib ħafna, sabiex tkun tista' timxi minn direzzjoni għal oħra aktar malajr milli minn żoni oħra.

Fi kwalunkwe każ, ikun aktar faċli għal dawk bi kwalunkwe sfond tal-IT milli għal dawk li m'għandhomx. Bħala medja, adulti motivati ​​jerġgħu jitħarrġu u jibdlu l-impjieg kull 1,5–2 snin. Dan huwa aktar faċli għal dawk li jistudjaw fi grupp u ma 'parrinu, meta mqabbla ma' dawk li jiddependu biss fuq sorsi miftuħa.

Mill-edituri tan-Netology

Jekk qed tħares lejn il-professjoni ta' Inġinier tad-Data jew Xjentist tad-Data, aħna nistednuk tistudja l-programmi tal-kors tagħna:

Sors: www.habr.com

Żid kumment