Amin'izao fotoana izao dia olona tsy manana fifandraisana ivelany amin'ny tontolo ivelany ihany no tsy nandre momba ny angona lehibe. Ao amin'ny HabrΓ©, malaza ny lohahevitra momba ny fanadihadiana Big Data sy ny lohahevitra mifandraika amin'izany. Fa ho an'ireo tsy manam-pahaizana manokana izay te hanokana ny tenany amin'ny fandalinana ny Big Data, dia tsy mazava foana hoe inona no antenain'ity faritra ity, izay azo ampiharina amin'ny Big Data analytics ary inona no azon'ny mpandinika tsara. Andeha hojerentsika izany.
Mitombo isan-taona ny fampahalalam-baovao ateraky ny olombelona. Amin'ny taona 2020 dia hitombo ho 40-44 zettabytes (1 ZB ~ 1 miliara GB) ny angon-drakitra voatahiry. Amin'ny 2025 - hatramin'ny 400 zettabytes eo ho eo. Araka izany, ny fitantanana angon-drakitra voarafitra sy tsy voarafitra amin'ny fampiasana ny teknolojia maoderina dia sehatra iray izay lasa manan-danja hatrany. Samy liana amin'ny angon-drakitra lehibe ny orinasa tsirairay na ny firenena iray manontolo.
Raha ny tokony ho izy, nandritra ny fifanakalozan-kevitra momba ny firoboroboan'ny fampahalalam-baovao sy ny fomba fanodinana ny angona noforonin'olombelona no nipoiran'ny teny hoe Big Data. Inoana fa tamin'ny 2008 no nanolorana azy io voalohany tamin'ny tonian'ny gazety Nature, Clifford Lynch.
Nanomboka teo, ny tsenan'ny Big Data dia nitombo isan-taona am-polony isan-jato. Ary mbola hitohy io fironana io, hoy ny manam-pahaizana. Araka izany, araka ny tombantombanβny orinasa amin'ny 2021, ny totalin'ny tsenan'ny famakafakana data lehibe eran-tany dia hiakatra ho $67,2 lavitrisa. Ny fitomboana isan-taona dia eo amin'ny 35,9%.
Nahoana isika no mila analytics data lehibe?
Mamela anao hamantatra ny fampahalalana tena sarobidy avy amin'ny angon-drakitra voarafitra na tsy voarindra. Noho izany, ny orinasa iray dia afaka, ohatra, mamantatra ny fironana, maminavina ny fahombiazan'ny famokarana ary manatsara ny vidiny. Mazava fa mba hampihenana ny fandaniana dia vonona ny orinasa hampihatra ny vahaolana farany.
Teknolojia sy fomba famakafakana izay ampiasaina handinihana Big Data:
- Data Mining;
- crowdsourcing;
- fampifangaroana sy fampidirana angona;
- fianarana milina;
- tambajotra neural artifisialy;
- famantarana ny lamina;
- fanadihadiana mialoha;
- modeling simulation;
- fanadihadiana spatial;
- fanadihadiana statistika;
- fijerena angon-drakitra analytique.
Big Data analytics eto amin'izao tontolo izao
Ny famakafakana data lehibe dia ampiasain'ny orinasa mihoatra ny 50% eran'izao tontolo izao. Na dia eo aza ny zava-misy fa tamin'ny taona 2015 dia 17% ihany io tarehimarika io. Ny Big Data dia ampiasain'ny orinasa miasa amin'ny sehatry ny fifandraisan-davitra sy ny serivisy ara-bola. Avy eo dia misy orinasa manokana momba ny teknolojian'ny fahasalamana. Fampiasana kely indrindra amin'ny famakafakana Big Data amin'ny orinasam-pampianarana: amin'ny ankamaroan'ny tranga, ny solontenan'ity sehatra ity dia nanambara ny fikasany hampiasa teknolojia tsy ho ela.
Any Etazonia, ny analytics Big Data dia ampiasaina amin'ny fomba mavitrika indrindra: mihoatra ny 55% amin'ny orinasa avy amin'ny sehatra isan-karazany no miasa amin'ity teknolojia ity. Any Eoropa sy Azia, tsy dia ambany loatra ny fangatahana famakafakana data lehibe - eo amin'ny 53%.
Ary ahoana ny amin'i Russia?
Araka ny fanadihadian'ny IDC,. Ny fitomboan'ny tsenan'ny vahaolana toy izany any Eoropa Afovoany sy Atsinanana dia tena mavitrika, mitombo 11% isan-taona io tarehimarika io. Amin'ny 2022 dia hahatratra $ 5,4 lavitrisa izany amin'ny lafiny fatra.
Amin'ny lafiny maro, ity fivoarana haingana ny tsena ity dia noho ny fitomboan'ny faritra ao Rosia. Tamin'ny taona 2018, ny vola miditra amin'ny fivarotana vahaolana mifandraika amin'ny Federasiona Rosiana dia nitentina 40% amin'ny totalin'ny fampiasam-bola amin'ny teknolojia fanodinana Big Data ao amin'ny faritra manontolo.
Ao amin'ny Federasiona Rosiana, ny orinasa avy amin'ny banky sy ny sehatra ho an'ny daholobe, ny indostrian'ny fifandraisan-davitra ary ny indostria dia mandany betsaka indrindra amin'ny fanodinana Big Data.
Inona no ataon'ny Big Data Analyst ary ohatrinona ny vola azony any Rosia?
Ny mpandinika angon-drakitra lehibe dia tompon'andraikitra amin'ny fandinihana fampahalalana be dia be, na semi-structured na tsy voarafitra. Ho an'ny fikambanana banky ireo dia fifampiraharahana, ho an'ny mpandraharaha - antso sy fifamoivoizana, amin'ny antsinjarany - fitsidihana sy fividianana mpanjifa. Araka ny voalaza etsy ambony, ny famakafakana Big Data dia ahafahantsika mahita ny fifandraisana misy eo amin'ny anton-javatra isan-karazany amin'ny "tantaram-baovao manta", ohatra, ny fizotran'ny famokarana na ny fanehoan-kevitra simika. Miorina amin'ny angon-drakitra famakafakana, misy fomba fiasa sy vahaolana vaovao novolavolaina amin'ny sehatra isan-karazany - manomboka amin'ny famokarana ka hatramin'ny fitsaboana.
Ny fahaiza-manao ilaina amin'ny mpandinika Big Data:
- Ny fahafahana hahatakatra haingana ny endri-javatra ao amin'ny faritra izay anaovana ny famakafakana, ary miroboka amin'ny lafiny amin'ny faritra tiana. Mety ho antsinjarany, indostrian'ny solika sy entona, fanafody, sns.
- Fahalalana ny fomba famakafakana angon-drakitra statistika, fananganana modely matematika (tambajotra neural, tambajotra Bayesian, clustering, regression, factor, variance ary famakafakana fifandraisana, sns.).
- Mahaiza maka angon-drakitra avy amin'ny loharano samihafa, manova azy ho an'ny famakafakana, ary mampiditra azy ao anaty angon-drakitra analytique.
- Mahay amin'ny SQL.
- Fahalalana ny teny anglisy amin'ny ambaratonga ampy mba hamakiana mora foana ny antontan-taratasy ara-teknika.
- Fahalalana ny Python (farafaharatsiny ny fototra), Bash (tena sarotra ny manao izany raha tsy eo amin'ny dingan'ny asa), miampy ny mahafantatra ny fototry ny Java sy Scala (ilaina amin'ny fampiasana mavitrika ny Spark, iray amin'ireo rafitra malaza indrindra amin'ny fiasana amin'ny angona lehibe).
- Fahaizana miasa amin'ny Hadoop.
Eny, ohatrinona no azon'ny mpandinika Big Data?
Ny manam-pahaizana momba ny Big Data dia tsy ampy famatsiana; mihoatra ny tolotra ny fangatahana. Izany dia satria tonga amin'ny fahatakarana ny fandraharahana: mitaky teknolojia vaovao ny fampandrosoana, ary mila manam-pahaizana manokana ny fampandrosoana ny teknolojia.
Noho izany, Data Scientist sy Data Analytics any Etazonia araka ny filazan'ny masoivoho recruiting Glassdoor. Manomboka amin'ny $100 arivo isan-taona ny salanisan'ny karaman'ireo manampahaizana manokana ireo any Amerika.
Ao Rosia, ny manam-pahaizana momba ny fianarana milina dia mahazo avy amin'ny 130 ka hatramin'ny 300 arivo roubles isam-bolana, mpandinika data lehibe - avy amin'ny 73 ka hatramin'ny 200 arivo roubles isam-bolana. Izany rehetra izany dia miankina amin'ny traikefa sy ny fahaiza-manao. Mazava ho azy fa misy ny toerana tsy misy karama ambany, ary misy ny ambony. Fitakiana ambony indrindra ho an'ny mpandinika angona lehibe ao Moskoa sy St. Petersburg. Moskoa, izay tsy mahagaga, dia eo amin'ny 50% amin'ny fahabangan-toerana mavitrika (araka ny hh.ru). Vitsy kokoa ny fangatahana any Minsk sy Kyiv. Tsara ny manamarika fa misy ny fahabangan-toerana manome ora miovaova sy asa lavitra. Saingy amin'ny ankapobeny, mila manam-pahaizana manokana miasa ao amin'ny birao ny orinasa.
Rehefa mandeha ny fotoana, dia afaka manantena ny fitomboan'ny fangatahana ho an'ny mpandinika Big Data sy ny solontenan'ny manokana mifandraika amin'izany. Araka ny voalaza etsy ambony dia tsy nofoanana ny tsy fahampian'ny mpiasa eo amin'ny sehatry ny teknolojia. Saingy, mazava ho azy, raha te ho lasa mpanadihady Big Data ianao dia mila mianatra sy miasa, manatsara ny fahaiza-manao voalaza etsy ambony sy ny fanampiny. Ny iray amin'ireo fahafahana hanomboka ny lalan'ny Big Data mpandinika dia ary andramo ny tananao miasa amin'ny angon-drakitra lehibe.
Source: www.habr.com