Data Engineer sy Data Scientist: inona no azon'izy ireo atao sy ohatrinona ny vola azony

Miaraka amin'i Elena Gerasimova, lehiben'ny mpampianatra "Data Science sy Analytics»ao amin'ny Netology dia manohy mahatakatra ny fomba ifandraisan'izy ireo sy ny maha-samihafa ny mpahay siansa momba ny data sy ny injeniera momba ny angona izahay.

Tamin'ny tapany voalohany no nolazain'izy ireo momba ny fahasamihafana lehibe eo amin'ny Data Scientist sy Data Engineer.

Ato amin'ity fitaovana ity isika dia hiresaka momba ny fahalalana sy ny fahaiza-manao tokony hananan'ny manam-pahaizana manokana, inona ny fanabeazana no lanin'ny mpampiasa, ny fomba anaovana ny dinidinika, ary ny vola azon'ny injeniera data sy ny mpahay siansa momba ny data. 

Inona no tokony ho fantatry ny mpahay siansa sy ny injeniera

Ny fampianarana manokana ho an'ireo manampahaizana manokana dia ny Siansa Informatika.

Data Engineer sy Data Scientist: inona no azon'izy ireo atao sy ohatrinona ny vola azony

Izay mpahay siansa momba ny data — mpahay siansa na mpandinika angona — dia tsy maintsy afaka manaporofo ny fahamarinan'ny fanatsoahan-keviny. Tsy afaka manao izany ianao raha tsy misy fahalalana statistika sy matematika fototra mifandraika amin'ny statistika.

Ny fianarana milina sy ny fitaovana analyse data dia tena ilaina amin'ny tontolo maoderina. Raha tsy misy ny fitaovana mahazatra dia mila manana ny fahaiza-manao ianao mianatra fitaovana vaovao haingana, mamorona sora-baventy tsotra hanamarihana ny asa.

Zava-dehibe ny manamarika fa ny mpahay siansa momba ny data dia tsy maintsy mampita tsara ny vokatry ny fanadihadiana. Hanampy azy amin’izany izany fampitana angona na ny vokatry ny fikarohana sy ny fitsapana ny petra-kevitra. Ny manam-pahaizana manokana dia tsy maintsy mahay mamorona tabilao sy kisary, mampiasa fitaovana fijerena sary, ary mahatakatra sy manazava ny angona avy amin'ny dashboard.

Data Engineer sy Data Scientist: inona no azon'izy ireo atao sy ohatrinona ny vola azony

Ho an'ny injeniera data, faritra telo no misongadina.

Algorithms sy rafitra data. Zava-dehibe ny mahay manoratra kaody ary mampiasa rafitra fototra sy algorithm:

  • famakafakana sarotra algorithm,
  • fahaizana manoratra kaody mazava tsara, 
  • fanodinana batch,
  • fanodinana amin'ny fotoana tena izy.

Angon-drakitra sy trano fanatobiana angona, Business Intelligence:

  • fitahirizana sy fanodinana data,
  • famolavolana rafitra feno,
  • Data ingestion,
  • rafitra fichier zaraina.

Hadoop sy Big Data. Mihabetsaka ny angon-drakitra, ary mandritra ny faravodilanitra ao anatin'ny 3-5 taona, ireo teknolojia ireo dia ho ilaina ho an'ny injeniera tsirairay. Fanampiny:

  • Data Lakes
  • miara-miasa amin'ireo mpamatsy rahona.

Fianarana milina dia ho ampiasaina na aiza na aiza, ary zava-dehibe ny mahatakatra ny olana ara-barotra izay hanampy hamaha. Tsy ilaina ny manao modely (ny mpahay siansa momba ny data dia afaka miatrika izany), fa mila mahatakatra ny fampiharana azy sy ny fepetra mifanaraka amin'izany ianao.

Ohatrinona ny vola azon'ny injeniera sy ny mpahay siansa?

Data Engineer Income

Amin'ny fampiharana iraisam-pirenena Ny karama manomboka dia matetika $ 100 isan-taona ary mitombo be amin'ny traikefa, araka ny Glassdoor. Ankoatr'izay, matetika ny orinasa dia manome safidy stock sy bonus 000-5% isan-taona.

Ao Rosia Amin'ny fiandohan'ny asa, ny karama dia matetika tsy latsaky ny 50 arivo roubles any amin'ny faritra ary 80 arivo ao Moskoa. Tsy mila traikefa afa-tsy ny fiofanana vita amin'ity dingana ity.

Rehefa afaka 1-2 taona ny asa - ny 90-100 arivo roubles.

Mitombo ho 120–160 arivo ny fork ao anatin'ny 2–5 taona. Manampy ireo lafin-javatra toy ny fanasokajiana ny orinasa teo aloha, ny haben'ny tetikasa, ny asa miaraka amin'ny angona lehibe, sns.

Aorian'ny 5 taona niasana dia mora kokoa ny mitady toerana banga amin'ny sampana mifandraika amin'izany na mangataka toerana manokana toy ny:

  • Architect na mpitarika mpamorona amin'ny banky na telecom - eo amin'ny 250 arivo.

  • Alohan'ny varotra avy amin'ny mpivarotra izay ny teknolojia niasanao akaiky indrindra - 200 arivo miampy bonus azo atao (1-1,5 tapitrisa roubles). 

  • Manam-pahaizana amin'ny fampiharana ny orinasa Enterprise fampiharana, toy ny SAP - hatramin'ny 350 arivo.

Ny fidiram-bolan'ny mpahay siansa data

fianarana tsenan'ny mpandinika ny orinasa "Normal Research" sy ny sampan-draharaha recruiting New.HR dia mampiseho fa ny manam-pahaizana momba ny Data Science dia mahazo karama ambony kokoa noho ny mpandinika ny specialties hafa. 

Ao Rosia, ny karama fanombohan'ny mpahay siansa data hatramin'ny herintaona dia 113 arivo roubles. 

Ny fahavitan'ny fandaharam-pampianarana dia raisina ho toy ny traikefa amin'ny asa ihany koa.

Rehefa afaka 1-2 taona, manam-pahaizana manokana toy izany dia afaka mahazo hatramin'ny 160 arivo.

Ho an'ny mpiasa manana traikefa 4-5 taona dia mitombo ho 310 arivo ny fork.

Ahoana ny fanaovana dinidinika?

Any amin'ny Tandrefana, ireo nahazo diplaoma amin'ny programa fanofanana arak'asa dia manana antsafa voalohany amin'ny salan'isa 5 herinandro aorian'ny fizarana diplaoma. Manodidina ny 85% no mahita asa rehefa afaka 3 volana.

Ny fizotran'ny dinidinika momba ny toeran'ny injeniera data sy ny siantifika data dia saika mitovy. Matetika dia misy dingana dimy.

famintinana. Ireo mpilatsaka hofidina tsy manana traikefa teo aloha (ohatra, ny varotra) dia takiana hanomana taratasy fanoratana amin'ny antsipiriany ho an'ny orinasa tsirairay na manana reference avy amin'ny solontenan'io orinasa io.

Fandinihana ara-teknika. Amin'ny telefaonina no atao matetika. Ahitana fanontaniana sarotra iray na roa sy fanontaniana tsotra maro mifandraika amin'ny antontam-baovaon'ny mpampiasa ankehitriny.

Fanadihadiana momba ny HR. Azo atao an-telefaonina. Amin'ity dingana ity, ny kandidà dia sedraina amin'ny fahafenoan'ny ankapobeny sy ny fahaizana mifandray.

Fanadihadiana ara-teknika. Matetika indrindra dia mitranga amin'ny olona izany. Ao amin'ny orinasa samihafa, ny haavon'ny toerana eo amin'ny latabatra mpiasa dia tsy mitovy, ary mety ho hafa ny anarana. Noho izany, amin'ity dingana ity dia fahalalana ara-teknika no andrana.

Resadresaka nifanaovana tamin'ny CTO/Chief Architect. Toerana stratejika ny injeniera sy ny mpahay siansa, ary vaovao ihany koa ho an'ny orinasa maro. Zava-dehibe ny tian'ny mpitantana ny mety ho mpiara-miasa aminy ary miombon-kevitra aminy amin'ny heviny.

Inona no hanampy ny mpahay siansa sy ny injeniera amin'ny fitomboan'ny asany?

Be dia be ny fitaovana vaovao ho an'ny miasa miaraka amin'ny angona niseho. Ary vitsy ny olona mitovy tsara amin'ny rehetra. 

Betsaka ny orinasa tsy vonona handray mpiasa raha tsy manana traikefa momba ny asa. Na izany aza, ireo kandidà manana fiaviana kely sy fahalalana momba ny fototry ny fitaovana malaza dia afaka mahazo ny traikefa ilaina raha mianatra sy mivoatra samirery.

Toetra mahasoa ho an'ny injeniera data sy mpahay siansa data

Faniriana sy fahaizana mianatra. Tsy voatery hanenjika traikefa avy hatrany ianao na hiova asa amin'ny fitaovana vaovao, fa mila vonona ny hifindra any amin'ny faritra vaovao ianao.

Ny faniriana hanao automatique ny dingana mahazatra. Zava-dehibe izany tsy ho an'ny famokarana ihany, fa koa amin'ny fitazonana ny kalitao avo lenta sy ny hafainganam-pandehan'ny fandefasana amin'ny mpanjifa.

Ny fiheverana sy ny fahatakarana ny "zavatra eo ambanin'ny saron-tava" amin'ny dingana. Ny manam-pahaizana manokana izay manana fandinihana sy fahalalana tsara momba ny dingana dia hamaha ny olana haingana kokoa.

Ho fanampin'ny fahalalana tsara momba ny algorithm, ny firafitry ny data ary ny fantsona, ilainao mianatra mieritreritra amin'ny vokatra — jereo ny maritrano sy ny vahaolana ara-barotra ho sary tokana. 

Ohatra, ilaina ny maka izay serivisy fanta-daza ary mamorona tahiry ho azy. Avy eo eritrereto ny fomba hamolavolana ETL sy DW izay hameno azy amin'ny angon-drakitra, karazana mpanjifa inona ary inona no zava-dehibe ho azy ireo hahafantatra momba ny angon-drakitra, ary koa ny fomba fifandraisan'ny mpividy amin'ny fangatahana: ho an'ny fitadiavana asa sy fampiarahana, fanofana fiara. , fampiharana podcast, sehatra fanabeazana.

Ny toeran'ny mpandinika, mpahay siansa momba ny angona ary injeniera dia tena akaiky, noho izany dia afaka mifindra haingana kokoa amin'ny lalana iray mankany amin'ny iray hafa haingana kokoa noho ny avy amin'ny faritra hafa ianao.

Na izany na tsy izany dia ho mora kokoa ho an'ireo izay manana traikefa momba ny IT noho ireo izay tsy manana izany. Amin'ny ankapobeny, ny olon-dehibe mazoto dia miofana indray ary miova asa isaky ny 1,5-2 taona. Mora kokoa izany ho an'ireo izay mianatra amin'ny vondrona iray sy miaraka amin'ny mpanoro hevitra, raha oharina amin'ireo izay tsy miantehitra afa-tsy amin'ny loharano misokatra.

Avy amin'ny tonian'ny Netology

Raha mijery ny asan'ny Data Engineer na Data Scientist ianao, dia manasa anao izahay handalina ny fandaharam-pianaranay:

Source: www.habr.com

Add a comment