Illum in-nies biss li m'għandhomx konnessjonijiet esterni mad-dinja ta' barra ma semgħux bil-big data. Fuq Habré, is-suġġett tal-analitika tal-Big Data u suġġetti relatati huwa popolari. Iżda għal dawk li mhumiex speċjalisti li jixtiequ jiddedikaw ruħhom għall-istudju tal-Big Data, mhux dejjem huwa ċar x’prospetti għandu dan il-qasam, fejn tista’ tiġi applikata l-analitika tal-Big Data u fuq xiex jista’ joqgħod analista tajjeb. Ejja nippruvaw insemmu.
L-ammont ta 'informazzjoni ġġenerata mill-bnedmin jiżdied kull sena. Sal-2020, l-ammont ta 'dejta maħżuna se jiżdied għal 40-44 zettabytes (1 ZB ~ 1 biljun GB). Sal-2025 - sa madwar 400 zettabytes. Għaldaqstant, il-ġestjoni ta' data strutturata u mhux strutturata bl-użu ta' teknoloġiji moderni hija qasam li qed isir dejjem aktar importanti. Kemm kumpaniji individwali kif ukoll pajjiżi sħaħ huma interessati fil-big data.
Mill-mod, kien waqt id-diskussjoni tal-isplużjoni tal-informazzjoni u l-metodi ta 'proċessar ta' data ġġenerata mill-bniedem li t-terminu Big Data inqala'. Huwa maħsub li kien propost għall-ewwel darba fl-2008 mill-editur tal-ġurnal Nature, Clifford Lynch.
Minn dakinhar 'l hawn, is-suq tal-Big Data qed jiżdied kull sena b'diversi għexieren ta' fil-mija. U din it-tendenza, skond l-esperti, se tkompli. Għalhekk, skond l-istimi tal-kumpanija
Għaliex għandna bżonn l-analiżi tad-dejta kbira?
Jippermettilek tidentifika informazzjoni estremament siewja minn settijiet ta' data strutturati jew mhux strutturati. Grazzi għal dan, negozju jista ', pereżempju, jidentifika tendenzi, ibassar il-prestazzjoni tal-produzzjoni u jottimizza l-ispejjeż tiegħu stess. Huwa ċar li sabiex inaqqsu l-ispejjeż, il-kumpaniji huma lesti li jimplimentaw l-aħħar soluzzjonijiet.
Teknoloġiji u metodi ta’ analiżi li jintużaw biex janalizzaw il-Big Data:
- Data Mining;
- crowdsourcing;
- it-taħlit u l-integrazzjoni tad-dejta;
- Tagħlim bil-magni;
- Netwerks newrali artifiċjali;
- rikonoxximent tal-mudelli;
- Analitika ta' tbassir;
- immudellar ta' simulazzjoni;
- analiżi spazjali;
- analiżi statistika;
- viżwalizzazzjoni ta' data analitika.
Analitika tal-Big Data fid-dinja
L-analitika tad-dejta kbira issa tintuża minn aktar minn 50% tal-kumpaniji madwar id-dinja. Minkejja l-fatt li fl-2015 din iċ-ċifra kienet biss 17%. Il-Big Data tintuża bl-aktar mod attiv minn kumpaniji li joperaw fis-setturi tat-telekomunikazzjoni u s-servizzi finanzjarji. Imbagħad hemm kumpaniji li jispeċjalizzaw fit-teknoloġija tal-kura tas-saħħa. Użu minimu tal-analitika tal-Big Data f'kumpaniji edukattivi: f'ħafna każijiet, rappreżentanti ta 'dan il-qasam ħabbru l-intenzjoni tagħhom li jużaw it-teknoloġija fil-futur qarib.
Fl-Istati Uniti, l-analitika tal-Big Data tintuża bl-aktar mod attiv: aktar minn 55% tal-kumpaniji minn varjetà ta 'oqsma jaħdmu b'din it-teknoloġija. Fl-Ewropa u fl-Asja, id-domanda għall-analitika tad-dejta kbira mhix ħafna inqas - madwar 53%.
U xi ngħidu għar-Russja?
Skont l-analisti tal-IDC,
F'ħafna modi, dan l-iżvilupp mgħaġġel tas-suq huwa dovut għat-tkabbir ta 'din iż-żona fir-Russja. Fl-2018, id-dħul mill-bejgħ ta 'soluzzjonijiet rilevanti fil-Federazzjoni Russa ammonta għal 40% tal-investiment totali fit-teknoloġiji tal-ipproċessar tad-Data Big fir-reġjun kollu.
Fil-Federazzjoni Russa, kumpaniji mis-settur bankarju u pubbliku, l-industrija tat-telekomunikazzjoni u l-industrija jonfqu l-aktar fuq l-ipproċessar tad-Data Big.
X'jagħmel Big Data Analyst u kemm jaqla' fir-Russja?
Analista tad-dejta kbira huwa responsabbli biex jeżamina ammonti vasti ta 'informazzjoni, kemm semi-strutturata kif ukoll mhux strutturata. Għall-organizzazzjonijiet bankarji dawn huma tranżazzjonijiet, għall-operaturi - sejħiet u traffiku, fil-bejgħ bl-imnut - żjarat tal-klijenti u xiri. Kif imsemmi hawn fuq, l-analiżi tal-Big Data tippermettilna niskopru konnessjonijiet bejn diversi fatturi fl-"istorja tal-informazzjoni prima", pereżempju, proċess ta 'produzzjoni jew reazzjoni kimika. Ibbażat fuq id-dejta tal-analiżi, approċċi u soluzzjonijiet ġodda huma żviluppati f'varjetà ta 'oqsma - mill-manifattura għall-mediċina.
Ħiliet meħtieġa għal analista ta' Big Data:
- Il-ħila li tifhem malajr il-karatteristiċi fiż-żona li għaliha qed titwettaq l-analiżi, u li tgħaddas ruħek f'aspetti taż-żona mixtieqa. Dan jista 'jkun bejgħ bl-imnut, industrija taż-żejt u tal-gass, mediċina, eċċ.
- Għarfien ta' metodi ta' analiżi ta' data statistika, kostruzzjoni ta' mudelli matematiċi (netwerks newrali, netwerks Bayesjani, raggruppament, rigressjoni, analiżi tal-fatturi, varjanza u korrelazzjoni, eċċ.).
- Ikunu kapaċi estratt data minn sorsi differenti, tittrasformaha għall-analiżi, u tgħabbiha f'database analitika.
- Profiċjenti fl-SQL.
- Għarfien tal-Ingliż f'livell suffiċjenti biex taqra faċilment dokumentazzjoni teknika.
- Għarfien ta 'Python (għall-inqas l-affarijiet bażiċi), Bash (huwa diffiċli ħafna li tagħmel mingħajru fil-proċess tax-xogħol), flimkien ma' huwa mixtieq li tkun taf l-baŜi ta 'Java u Scala (meħtieġ għall-użu attiv ta' Spark, wieħed mill- l-aktar oqfsa popolari għall-ħidma mal-big data).
- Kapaċità li taħdem ma 'Hadoop.
Ukoll, kemm jaqla’ analista ta’ Big Data?
L-ispeċjalisti tal-Big Data issa huma fil-qosor; id-domanda teċċedi l-provvista. Dan għaliex in-negozju qed jifhem: l-iżvilupp jeħtieġ teknoloġiji ġodda, u l-iżvilupp tat-teknoloġija jeħtieġ speċjalisti.
Allura, Data Xjentist u Data Analytics fl-Istati Uniti
Fir-Russja, speċjalisti tat-tagħlim tal-magni jirċievu minn 130 sa 300 elf rublu kull xahar, analisti tad-dejta kbira - minn 73 sa 200 elf rublu kull xahar. Kollox jiddependi fuq l-esperjenza u l-kwalifiki. Ovvjament, hemm postijiet battala b’salarji aktar baxxi, u oħrajn b’oħrajn ogħla. Domanda massima għall-analisti tad-dejta kbira f'Moska u San Pietruburgu. Moska, li mhix sorprendenti, tammonta għal madwar 50% tal-postijiet battala attivi (skond hh.ru). Ħafna inqas domanda hija f'Minsk u Kiev. Ta’ min jinnota li xi postijiet vakanti joffru sigħat flessibbli u xogħol mill-bogħod. Iżda b'mod ġenerali, il-kumpaniji jeħtieġu speċjalisti li jaħdmu fl-uffiċċju.
Maż-żmien, nistgħu nistennew żieda fid-domanda għall-analisti tal-Big Data u rappreżentanti ta 'speċjalitajiet relatati. Kif imsemmi hawn fuq, in-nuqqas ta 'persunal fis-settur tat-teknoloġija ma ġiex ikkanċellat. Iżda, ovvjament, sabiex issir analista tal-Big Data, trid tistudja u taħdem, ittejjeb kemm il-ħiliet elenkati hawn fuq kif ukoll dawk addizzjonali. Waħda mill-opportunitajiet biex tibda t-triq tal-analista Big Data hija
Sors: www.habr.com