Dmitry Kazakov, Data Analytics Team Lead fil-Grupp Kolesa, jaqsam għarfien mill-ewwel stħarriġ tal-Każakstan tal-professjonisti tad-dejta.
Fir-ritratt: Dmitry Kazakov
Ftakar il-frażi popolari li l-Big Data hija l-aktar bħal sess adoloxxenti - kulħadd jitkellem dwarha, iżda ħadd ma jaf jekk fil-fatt jeżistix. L-istess jista 'jingħad dwar is-suq għall-ispeċjalisti tad-dejta (fil-Każakstan) - hemm hype, iżda min hu warajh (u jekk hemmx xi ħadd hemm xejn) ma kienx kompletament ċar - la għall-HR, la għall-maniġers , u lanqas biex ix-xjentisti tad-dejta nfushom.
Aħna qattgħu , li fiha stħarrġu aktar minn 300 speċjalista dwar is-salarji, il-funzjonijiet, il-ħiliet, l-għodod u ħafna aktar.
Spoiler: Iva, definittivament jeżistu, iżda kollox mhux daqshekk sempliċi.
ħarsa sabiħa. L-ewwelnett, hemm aktar xjenzati tad-dejta milli stennejna. Irnexxielna nintervistaw 300 persuna, fosthom mhux biss analisti tal-prodott, tal-marketing u tal-BI, iżda wkoll inġiniera tal-ML u DWH, li kien pjaċir b'mod speċjali. L-akbar grupp kien jinkludi lil dawk kollha li jsejħu lilhom infushom xjenzati tad-dejta - dak huwa 36% ta 'dawk li wieġbu. Huwa diffiċli li wieħed jgħid jekk dan ikoprix id-domanda tas-suq jew le, minħabba li s-suq innifsu għadu qed jiġi ffurmat.
Id-distribuzzjoni tal-livelli tax-xogħol hija konfuża - kważi hemm daqstant mexxejja tat-tim u maniġers daqs juniors. Jista 'jkun hemm diversi raġunijiet għal dan. Per eżempju, numru kbir ta 'timijiet żgħar ta' 2-3 nies, li fihom il-mexxej jista 'jkun speċjalista ta' livell medju jew anzjan.
Raġuni oħra tista 'tkun il-kaos li qed jirrenja bħalissa fis-suq rigward l-istandards fid-distribuzzjoni tar-rwoli u l-funzjonalità. Il-mexxejja tat-tim xi drabi jiġu assenjati lil dawk li sempliċiment jaħdmu sena jew tnejn itwal minn oħrajn, mingħajr referenza għal-livell ta’ ħiliet u għarfien. Dan narawh fid-distribuzzjoni tal-funzjonijiet skont il-pożizzjoni - 38% tal-maniġers u l-mexxejja tat-tim huma impenjati fil-pre-proċessar u 33% oħra f'analiżi statistika bażika.
Hawnhekk tlabna lil dawk li wieġbu biex jivvalutaw b'mod suġġettiv il-livell ta' analitika fil-kumpaniji tagħhom. Jekk tħares mill-qrib, tista' tara li 10% ta' dawk li wieġbu li jaħdmu f'dipartimenti analitiċi ta' 2-3 persuni jemmnu li għandhom "livell avvanzat."
X'inhu "livell avvanzat"? Is-sistema BI taħdem tajjeb ħafna. Hemm DWH u Big Data. It-testijiet A/B jitwettqu regolarment. Hemm sistemi ML u DS li jaħdmu fil-produzzjoni. Id-deċiżjonijiet jittieħdu biss abbażi tad-dejta. Id-dipartiment tal-ipproċessar tad-dejta u x-xjenza tad-dejta huwa wieħed minn dawk ewlenin fil-kumpanija.
Huwa kważi impossibbli li jinkiseb dak kollu ta 'hawn fuq b'dipartiment ta' 2-3 nies. Naħseb li dan ir-riżultat tal-istħarriġ huwa uġigħ żgħir li qed jikber - il-ġuvini għad m'għandhom lil min iqabblu lilhom infushom miegħu sabiex jiddeterminaw il-livell tagħhom b'mod aktar oġġettiv.
Kif mistenni, ix-xjenzati tad-dejta jqattgħu l-biċċa l-kbira tal-ħin tagħhom mhux fuq matematika jew inġinerija kumplessa super, iżda fuq l-ipproċessar minn qabel, it-tniżżil u t-tindif tad-dejta. F'kull speċjalizzazzjoni naraw preproċessar fl-aqwa 3. Iżda rari naraw affarijiet kumplessi bħall-iżvilupp ta 'mudelli ML jew naħdmu ma' Big Data fl-aqwa 3 - biss fost inġiniera ML u DWH.
Hemm ukoll ftit għarfien diqa. L-esperti jistabbilixxu 40% tal-kompiti tagħhom huma stess. Fil-Każakstan, s'issa l-aqwa kumpaniji tal-unicorn biss ippruvaw il-benefiċċji li jaħdmu ma 'dejta kbira u tgħallmu kif jagħmlu dan b'mod kompetenti. Huma jxandru lis-suq li l-Big Data u t-Tagħlim tal-Magni huma tajbin, u t-tieni echelon isegwi warajhom, iżda mhux dejjem jifhem kif taħdem id-data. Għalhekk, naraw li l-ispeċjalisti jistabbilixxu kompiti għalihom infushom, u n-negozji mhux dejjem jafu x'jixtiequ.
Kont sorpriż li 20% tal-ispeċjalisti lanqas biss jafu jekk il-kumpanija tagħhom għandhiex Data Warehouse. Iva, u b'sistemi ta' ġestjoni tad-database mhux kollox huwa daqshekk tajjeb - 41% jużaw MySQL, u 34% oħra jużaw PostgreSQL. X'jista' jfisser dan? Huma jaħdmu pjuttost b'dejta żgħira.
Fil-mistoqsija dwar is-sistemi tal-ħażna, nerġgħu naraw MySQL u anke (!) Excel. Iżda dan jista' jindika, pereżempju, li l-biċċa l-kbira tal-kumpaniji sempliċement għad m'għandhomx talba biex jaħdmu bil-big data.
Hawnhekk kollox huwa għal darb'oħra ambigwu. B'mod ġenerali, is-salarji kienu kemmxejn inqas milli stennejt.
Personalment, huwa diffiċli għalija li nimmaġina inġinier ML li lest jaħdem għal 200 elf tenge - huwa probabbilment intern. Jew il-kompetenzi ta 'speċjalisti bħal dawn huma dgħajfa ħafna, jew għadu diffiċli għall-kumpaniji li jevalwaw b'mod adegwat ix-xogħol tax-Xjenza tad-Data. Iżda forsi dan jindika wkoll li s-suq għadu fil-bidu nett tal-maturazzjoni tiegħu. U maż-żmien, il-livell tas-salarji se jiġi stabbilit fuq livell aktar adegwat.
Sors: www.habr.com