Loni awọn eniyan nikan ti ko ni awọn asopọ ita pẹlu agbaye ita ko ti gbọ ti data nla. Lori Habré, koko-ọrọ ti awọn atupale Data Nla ati awọn akọle ti o jọmọ jẹ olokiki. Ṣugbọn fun awọn alamọja ti kii ṣe alamọja ti yoo fẹ lati fi ara wọn si iwadi ti Big Data, kii ṣe nigbagbogbo pe kini awọn ifojusọna agbegbe yii ni, nibiti a le lo awọn atupale Big Data ati kini oluyanju to dara le gbẹkẹle. Jẹ ká gbiyanju lati ro ero rẹ.
Iye alaye ti ipilẹṣẹ nipasẹ eniyan n pọ si ni gbogbo ọdun. Ni ọdun 2020, iye data ti o fipamọ yoo pọ si 40-44 zettabytes (1 ZB ~ 1 bilionu GB). Ni ọdun 2025 - o to 400 zettabytes. Nitorinaa, iṣakoso iṣeto ati data ti a ko ṣeto nipa lilo awọn imọ-ẹrọ ode oni jẹ agbegbe ti o di pataki pupọ si. Mejeeji awọn ile-iṣẹ kọọkan ati gbogbo awọn orilẹ-ede nifẹ si data nla.
Nipa ọna, o jẹ lakoko ijiroro ti ariwo alaye ati awọn ọna ti sisẹ data ti ipilẹṣẹ eniyan ti ọrọ Big Data dide. O gbagbọ pe o ti kọkọ dabaa ni ọdun 2008 nipasẹ olootu ti iwe iroyin Nature, Clifford Lynch.
Lati igbanna, ọja Big Data ti n pọ si ni ọdọọdun nipasẹ ọpọlọpọ awọn mewa ti ogorun. Ati aṣa yii, ni ibamu si awọn amoye, yoo tẹsiwaju. Nitorinaa, ni ibamu si awọn iṣiro ile-iṣẹ ni 2021, apapọ ọja atupale data nla agbaye yoo pọ si $ 67,2 bilionu. Idagba ọdun yoo jẹ nipa 35,9%.
Kini idi ti a nilo awọn atupale data nla?
O gba ọ laaye lati ṣe idanimọ alaye ti o niyelori pupọ lati awọn eto data ti a ṣeto tabi ti a ko ṣeto. Ṣeun si eyi, iṣowo le, fun apẹẹrẹ, ṣe idanimọ awọn aṣa, ṣe asọtẹlẹ iṣẹ iṣelọpọ ati mu awọn idiyele tirẹ pọ si. O han gbangba pe lati le dinku awọn idiyele, awọn ile-iṣẹ ti ṣetan lati ṣe awọn solusan tuntun.
Awọn imọ-ẹrọ ati awọn ọna itupalẹ ti a lo lati ṣe itupalẹ Big Data:
- Iwakusa data;
- ogunlọgọ;
- data dapọ ati Integration;
- ẹkọ ẹrọ;
- Oríkĕ nkankikan nẹtiwọki;
- idanimọ apẹrẹ;
- awọn atupale asọtẹlẹ;
- simulation modeli;
- itupalẹ aaye;
- iṣiro iṣiro;
- iworan ti analitikali data.
Awọn atupale data nla ni agbaye
Awọn atupale data nla ti wa ni lilo diẹ sii ju 50% ti awọn ile-iṣẹ agbaye. Bíótilẹ o daju wipe ni 2015 yi nọmba rẹ jẹ nikan 17%. Data Nla jẹ lilo pupọ julọ nipasẹ awọn ile-iṣẹ ti n ṣiṣẹ ni awọn ibaraẹnisọrọ ati awọn apa iṣẹ inawo. Lẹhinna awọn ile-iṣẹ wa ti o ṣe amọja ni imọ-ẹrọ ilera. Lilo kekere ti Awọn atupale Big Data ni awọn ile-iṣẹ eto-ẹkọ: ni ọpọlọpọ awọn ọran, awọn aṣoju ti aaye yii kede ero wọn lati lo imọ-ẹrọ ni ọjọ iwaju nitosi.
Ni Orilẹ Amẹrika, a lo awọn atupale Big Data pupọ julọ: diẹ sii ju 55% ti awọn ile-iṣẹ lati oriṣiriṣi awọn aaye ṣiṣẹ pẹlu imọ-ẹrọ yii. Ni Yuroopu ati Esia, ibeere fun awọn atupale data nla ko kere pupọ - nipa 53%.
Kini nipa ni Russia?
Gẹgẹbi awọn atunnkanka IDC,. Idagba ti ọja fun iru awọn solusan ni Aarin ati Ila-oorun Yuroopu n ṣiṣẹ pupọ, nọmba yii pọ si nipasẹ 11% ni gbogbo ọdun. Ni ọdun 2022, yoo de $5,4 bilionu ni awọn ofin iwọn.
Ni ọpọlọpọ awọn ọna, idagbasoke iyara ti ọja jẹ nitori idagbasoke agbegbe yii ni Russia. Ni ọdun 2018, owo-wiwọle lati tita awọn solusan ti o yẹ ni Russian Federation jẹ 40% ti idoko-owo lapapọ ni awọn imọ-ẹrọ iṣelọpọ Big Data ni gbogbo agbegbe.
Ni Russian Federation, awọn ile-iṣẹ lati ile-ifowopamọ ati awọn apa gbangba, ile-iṣẹ ibaraẹnisọrọ ati ile-iṣẹ n lo pupọ julọ lori sisẹ data Big.
Kini Oluyanju Data Nla ṣe ati melo ni o jo'gun ni Russia?
Oluyanju data nla kan jẹ iduro fun ṣiṣe ayẹwo iye alaye ti o pọju, mejeeji ti o ni idasile ati ti ko ni eto. Fun awọn ẹgbẹ ile-ifowopamọ iwọnyi jẹ awọn iṣowo, fun awọn oniṣẹ - awọn ipe ati ijabọ, ni soobu - awọn ọdọọdun ati awọn rira alabara. Gẹgẹbi a ti sọ loke, Itupalẹ Data Nla gba wa laaye lati ṣawari awọn asopọ laarin awọn oriṣiriṣi awọn ifosiwewe ninu “itan alaye aise”, fun apẹẹrẹ, ilana iṣelọpọ tabi iṣesi kemikali. Da lori data onínọmbà, awọn isunmọ tuntun ati awọn solusan ni idagbasoke ni ọpọlọpọ awọn agbegbe - lati iṣelọpọ si oogun.
Awọn ogbon ti a beere fun Oluyanju Data Nla:
- Agbara lati yara ni oye awọn ẹya ara ẹrọ ti o wa ni agbegbe fun eyiti a nṣe itupalẹ, ati lati fi ara rẹ sinu awọn aaye ti agbegbe ti o fẹ. Eyi le jẹ soobu, ile-iṣẹ epo ati gaasi, oogun, ati bẹbẹ lọ.
- Imọ ti awọn ọna ti itupalẹ data iṣiro, ikole ti awọn awoṣe mathematiki (awọn nẹtiwọọki aifọkanbalẹ, awọn nẹtiwọọki Bayesian, iṣupọ, ipadasẹhin, ifosiwewe, iyatọ ati awọn itupalẹ ibamu, ati bẹbẹ lọ).
- Ni anfani lati yọkuro data lati awọn orisun oriṣiriṣi, yi pada fun itupalẹ, ki o gbe e sinu data data itupalẹ.
- Ope ni SQL.
- Imọ ti Gẹẹsi ni ipele ti o to lati ni irọrun ka iwe imọ-ẹrọ.
- Imọ ti Python (o kere ju awọn ipilẹ), Bash (o ṣoro pupọ lati ṣe laisi rẹ ninu ilana iṣẹ), pẹlu o jẹ iwunilori lati mọ awọn ipilẹ Java ati Scala (nilo fun lilo ṣiṣẹ ti Spark, ọkan ninu awọn awọn ilana olokiki julọ fun ṣiṣẹ pẹlu data nla).
- Agbara lati ṣiṣẹ pẹlu Hadoop.
O dara, Elo ni Oluyanju Data Nla n gba?
Awọn alamọja data nla ti wa ni ipese kukuru; ibeere ju ipese lọ. Eyi jẹ nitori iṣowo n bọ si oye: idagbasoke nilo awọn imọ-ẹrọ tuntun, ati idagbasoke imọ-ẹrọ nilo awọn alamọja.
Nitorinaa, Onimọ-jinlẹ data ati Awọn atupale data ni AMẸRIKA gẹgẹ bi igbanisiṣẹ ibẹwẹ Glassdoor. Oṣuwọn apapọ ti awọn alamọja wọnyi ni Amẹrika bẹrẹ lati $ 100 ẹgbẹrun fun ọdun kan.
Ni Russia, awọn alamọja ikẹkọ ẹrọ gba lati 130 si 300 ẹgbẹrun rubles fun oṣu kan, awọn atunnkanka data nla - lati 73 si 200 ẹgbẹrun rubles fun oṣu kan. Gbogbo rẹ da lori iriri ati awọn afijẹẹri. Nitoribẹẹ, awọn aye wa pẹlu awọn owo osu kekere, ati awọn miiran pẹlu awọn ti o ga julọ. Ibeere ti o pọju fun awọn atunnkanka data nla ni Moscow ati St. Moscow, eyiti kii ṣe iyalẹnu, awọn iroyin fun nipa 50% ti awọn aye ti nṣiṣe lọwọ (gẹgẹ bi hh.ru). Ibeere ti o kere pupọ wa ni Minsk ati Kyiv. O tọ lati ṣe akiyesi pe diẹ ninu awọn aye n pese awọn wakati rọ ati iṣẹ latọna jijin. Ṣugbọn ni gbogbogbo, awọn ile-iṣẹ nilo awọn alamọja ti o ṣiṣẹ ni ọfiisi.
Ni akoko pupọ, a le nireti ilosoke ninu ibeere fun awọn atunnkanka Data nla ati awọn aṣoju ti awọn amọja ti o jọmọ. Gẹgẹbi a ti sọ loke, aito awọn oṣiṣẹ ni eka imọ-ẹrọ ko ti fagile. Ṣugbọn, nitorinaa, lati le di oluyanju data nla, o nilo lati kawe ati ṣiṣẹ, imudarasi mejeeji awọn ọgbọn ti a ṣe akojọ loke ati awọn afikun. Ọkan ninu awọn aye lati bẹrẹ ọna ti Oluyanju Data nla ni ati gbiyanju ọwọ rẹ ni ṣiṣẹ pẹlu data nla.
orisun: www.habr.com