Dmitry Kazakov, Stiùiriche Sgioba Mion-sgrùdadh Dàta aig Kolesa Group, a’ roinn bheachdan bhon chiad sgrùdadh Kazakhstan air proifeiseantaich dàta.
Anns an dealbh: Dmitry Kazakov
Cuimhnich air an abairt mòr-chòrdte gu bheil Dàta Mòr nas coltaiche ri gnè deugaire - bidh a h-uile duine a’ bruidhinn mu dheidhinn, ach chan eil fios aig duine a bheil e ann dha-rìribh. Dh'fhaodadh an aon rud a ràdh mun mhargaidh airson eòlaichean dàta (ann an Kazakhstan) - tha hype ann, ach cò a tha air a chùlaibh (agus co dhiubh a tha duine ann idir) cha robh e gu tur soilleir - chan ann gu HR, no gu manaidsearan , no gu luchd-saidheans dàta iad fhèin.
Chaith sinn , anns an do rinn iad sgrùdadh air còrr air 300 eòlaiche air an tuarastal, gnìomhan, sgilean, innealan agus mòran a bharrachd.
Spoiler: Tha, tha iad gu cinnteach ann, ach chan eil a h-uile dad cho sìmplidh.
Deagh shealladh. An toiseach, tha barrachd luchd-saidheans dàta ann na bha sinn an dùil. Chaidh againn air agallamhan a dhèanamh le 300 neach, nam measg bha chan e a-mhàin luchd-anailis toraidh, margaidheachd agus BI, ach cuideachd innleadairean ML agus DWH, a bha gu sònraichte tlachdmhor. Anns a’ bhuidheann as motha bha a h-uile duine a chanas iad fhèin nan luchd-saidheans dàta - sin 36% den luchd-fhreagairt. Tha e duilich a ràdh a bheil seo a’ còmhdach iarrtas a’ mhargaidh no nach eil, leis gu bheil a’ mhargaidh fhèin dìreach ga chruthachadh.
Tha sgaoileadh ìrean obrach troimh-chèile - tha cha mhòr na h-uimhir de stiùirichean sgioba agus manaidsearan ann agus a tha de dh’ òigridh. Is dòcha gu bheil grunn adhbharan ann airson seo. Mar eisimpleir, àireamh mhòr de sgiobaidhean beaga de 2-3 neach, anns am faod an stiùiriche a bhith na eòlaiche meadhan-ìre no àrd-ìre.
Is dòcha gur e adhbhar eile an ùpraid a tha an-dràsta a’ riaghladh sa mhargaidh a thaobh inbhean ann an cuairteachadh dreuchdan agus comas-gnìomh. Bidh stiùirichean sgioba uaireannan air an sònrachadh dhaibhsan a tha dìreach ag obair bliadhna no dhà nas fhaide na feadhainn eile, gun iomradh a thoirt air an ìre de sgilean agus eòlas. Tha sinn a 'faicinn seo ann an sgaoileadh ghnìomhan a rèir suidheachadh - tha 38% de mhanaidsearan agus stiùirichean sgioba an sàs ann an ro-ghiollachd agus 33% eile ann am mion-sgrùdadh staitistigeil bunaiteach.
An seo dh’ iarr sinn air luchd-freagairt measadh pearsanta a dhèanamh air an ìre de mhion-sgrùdadh anns na companaidhean aca. Ma choimheadas tu gu dlùth, chì thu gu bheil 10% den luchd-fhreagairt a tha ag obair ann an roinnean anailis de 2-3 neach den bheachd gu bheil “ìre adhartach” aca.
Dè a th’ ann an “ìre adhartach”? Tha an siostam BI ag obair gu math. Tha DWH agus Dàta Mòr ann. Bithear a’ dèanamh deuchainnean A/B gu cunbhalach. Tha siostaman ML agus DS ag obair ann an cinneasachadh. Tha co-dhùnaidhean gan dèanamh a-mhàin stèidhichte air dàta. Is e an roinn giollachd dàta agus saidheans dàta aon de na prìomh fheadhainn sa chompanaidh.
Tha e cha mhòr do-dhèanta a h-uile rud gu h-àrd a choileanadh le roinn de 2-3 neach. Tha mi a’ smaoineachadh gu bheil toradh an t-suirbhidh seo na phian a tha a’ sìor fhàs - chan eil duine aig na balaich fhathast airson coimeas a dhèanamh riutha fhèin gus an ìre aca a dhearbhadh nas cinntiche.
Mar a bhiodh dùil, bidh luchd-saidheans dàta a’ caitheamh a’ mhòr-chuid den ùine chan ann air matamataig no innleadaireachd fìor iom-fhillte, ach air ro-phròiseasadh, luchdachadh sìos agus glanadh dàta. Anns a h-uile speisealachadh chì sinn ro-ghiollachd anns na 3 as àirde. Ach is ann ainneamh a chì sinn rudan iom-fhillte leithid a bhith a’ leasachadh mhodalan ML no ag obair le Big Data anns na 3 as àirde - dìreach am measg innleadairean ML agus DWH.
Tha dà shealladh brònach ann cuideachd. Shuidhich eòlaichean 40% de na gnìomhan aca fhèin. Ann an Kazakhstan, gu ruige seo chan eil ach prìomh chompanaidhean aon-adharcach air na buannachdan bho bhith ag obair le dàta mòr fheuchainn agus air ionnsachadh mar a nì iad e gu comasach. Bidh iad a’ craoladh chun mhargaidh gu bheil Dàta Mòr agus Ionnsachadh Inneal fionnar, agus tha an dàrna echelon a’ leantainn air chùl, ach chan eil e an-còmhnaidh a’ tuigsinn mar a tha obrachadh le dàta ag obair. Mar sin, tha sinn a 'faicinn gu bheil eòlaichean a' suidheachadh ghnìomhan dhaibh fhèin, agus chan eil fios aig gnìomhachasan daonnan dè a tha iad ag iarraidh.
Chuir e iongnadh orm nach eil fios aig 20% de eòlaichean eadhon a bheil Stòr-dàta aig a’ chompanaidh aca. Tha, agus le siostaman rianachd stòr-dàta chan eil a h-uile dad cho math - bidh 41% a’ cleachdadh MySQL, agus 34% eile a’ cleachdadh PostgreSQL. Dè dh’ fhaodadh seo a bhith a’ ciallachadh? Bidh iad ag obair gu ìre le dàta beag.
Anns a 'cheist mu shiostaman stòraidh, chì sinn a-rithist MySQL agus eadhon (!) Excel. Ach dh’ fhaodadh seo nochdadh, mar eisimpleir, nach eil a’ mhòr-chuid de chompanaidhean fhathast ag iarraidh a bhith ag obair le dàta mòr.
An seo tha a h-uile dad a-rithist dà-sheaghach. San fharsaingeachd, bha tuarastalan beagan nas ìsle na bha mi an dùil.
Gu pearsanta, tha e duilich dhomh smaoineachadh air innleadair ML a tha deiseil airson obair airson 200 mìle tenge - is dòcha gur e inntearnas a th’ ann. An dàrna cuid tha comasan nan eòlaichean sin gu math lag, no tha e fhathast duilich do chompanaidhean measadh iomchaidh a dhèanamh air obair Saidheans Dàta. Ach is dòcha gu bheil seo cuideachd a’ nochdadh gu bheil a’ mhargaidh fhathast aig fìor thoiseach a aibidh. Agus thar ùine, thèid an ìre tuarastail a stèidheachadh aig ìre nas iomchaidh.
Source: www.habr.com