Kiwari ngan ukur jalma-jalma anu teu aya hubungan luar sareng dunya luar anu teu acan nguping data ageung. Dina Habré, topik analytics Big Data sareng topik anu aya hubunganana populér. Tapi pikeun non-spesialis anu hoyong bakti diri kana ulikan ngeunaan Big Data, teu salawasna jelas naon prospek wewengkon ieu, dimana analytics Big Data bisa dilarapkeun jeung naon analis alus bisa ngandelkeun. Hayu urang coba ngartos eta kaluar.
Jumlah inpormasi anu dihasilkeun ku manusa ningkat unggal taun. Dina taun 2020, jumlah data anu disimpen bakal ningkat kana 40-44 zettabytes (1 ZB ~ 1 milyar GB). Nepi ka 2025 - nepi ka 400 zettabytes. Sasuai, ngokolakeun data terstruktur sareng henteu terstruktur nganggo téknologi modéren mangrupikeun daérah anu janten langkung penting. Duanana pausahaan individu jeung sakabéh nagara museurkeun data badag.
Ku jalan kitu, éta salila sawala ngeunaan booming informasi jeung métode ngolah data-generate manusa anu istilah Big Data timbul. Hal ieu dipercaya yén éta munggaran diajukeun dina 2008 ku redaktur jurnal Nature, Clifford Lynch.
Saprak harita, pasar Big Data geus ngaronjat taunan ku sababaraha puluhan persén. Sareng tren ieu, numutkeun para ahli, bakal diteruskeun. Ku kituna, nurutkeun perkiraan parusahaan dina 2021, total pasar analytics data gedé global bakal ningkat kana $ 67,2 milyar. Pertumbuhan taunan bakal sakitar 35,9%.
Naha urang peryogi analytics data ageung?
Éta ngamungkinkeun anjeun pikeun ngaidentipikasi inpormasi anu paling berharga tina set data terstruktur atanapi henteu terstruktur. Hatur nuhun kana ieu, bisnis tiasa, contona, ngaidentipikasi tren, ngaduga kinerja produksi sareng ngaoptimalkeun biaya sorangan. Ieu jelas yén dina raraga ngurangan biaya, pausahaan siap pikeun nerapkeun solusi panganyarna.
Téknologi sareng metode analisa anu dianggo pikeun nganalisis Big Data:
- Data Mining;
- crowdsourcing;
- campur jeung integrasi data;
- diajar mesin;
- jaringan saraf jieunan;
- pangakuan pola;
- analytics duga;
- modeling simulasi;
- analisis spasial;
- analisis statistik;
- visualisasi data analitik.
analytics Big Data di dunya
Analisis data ageung ayeuna dianggo ku langkung ti 50% perusahaan di dunya. Najan kanyataan yén dina 2015 angka ieu ngan 17%. Big Data paling aktip dianggo ku perusahaan anu beroperasi dina séktor telekomunikasi sareng jasa kauangan. Teras aya perusahaan anu khusus dina téknologi kasehatan. Minimal pamakéan analytics Big Data di pausahaan atikan: di hal nu ilahar, wawakil widang ieu ngumumkeun niat maranéhna pikeun ngagunakeun téhnologi dina mangsa nu bakal datang.
Di Amérika Serikat, analitik Big Data dianggo paling aktip: langkung ti 55% perusahaan tina sababaraha widang damel sareng téknologi ieu. Di Éropa sareng Asia, paménta pikeun analitik data ageung henteu langkung handap - sakitar 53%.
Kumaha upami di Rusia?
Numutkeun analis IDC,. Tumuwuhna pasar pikeun solusi sapertos di Éropa Tengah sareng Wétan cukup aktip, angka ieu ningkat ku 11% unggal taun. Ku 2022, éta bakal ngahontal $5,4 milyar dina istilah kuantitatif.
Ku sababaraha cara, pamekaran pasar anu gancang ieu disababkeun ku kamekaran daérah ieu di Rusia. Taun 2018, pendapatan tina penjualan solusi anu relevan di Féderasi Rusia jumlahna 40% tina total investasi dina téknologi ngolah Data Big di sakumna daérah.
Di Féderasi Rusia, perusahaan ti séktor perbankan sareng umum, industri telekomunikasi sareng industri nyéépkeun paling seueur pikeun ngolah Data Besar.
Naon anu dilakukeun ku analis data ageung sareng sabaraha anjeunna earn di Rusia?
Analis data gedé tanggung jawab pikeun mariksa sajumlah inpormasi, boh semi-terstruktur sareng henteu terstruktur. Pikeun organisasi perbankan, ieu mangrupikeun transaksi, pikeun operator - telepon sareng lalu lintas, dina ritel - kunjungan sareng pameseran palanggan. Sakumaha didadarkeun di luhur, analisis Big Data ngamungkinkeun urang pikeun manggihan sambungan antara sagala rupa faktor dina "sajarah informasi atah", contona, prosés produksi atawa réaksi kimiawi. Dumasar kana data analisa, pendekatan sareng solusi anyar dikembangkeun dina sababaraha daérah - ti manufaktur dugi ka ubar.
Kaahlian diperlukeun pikeun analis Big Data:
- Kamampuhan pikeun gancang ngartos fitur di daérah dimana analisa dilaksanakeun, sareng neuleumkeun diri dina aspék daérah anu dipikahoyong. Ieu bisa jadi ritel, industri minyak jeung gas, ubar, jsb.
- Pangaweruh ngeunaan métode analisis data statistik, pangwangunan model matematik (jaringan saraf, jaringan Bayesian, clustering, régrési, faktor, varian jeung analisis korelasi, jsb).
- Bisa nimba data tina sumber anu béda, transformasi pikeun dianalisis, sareng muatkeun kana database analitik.
- Mahir dina SQL.
- Pangaweruh basa Inggris dina tingkat anu cukup pikeun gampang maca dokuméntasi téknis.
- Pangaweruh ngeunaan Python (sahenteuna dasarna), Bash (hése pisan pikeun ngalakukeunana tanpa éta dina prosés damel), tambah éta desirable terang dasar-dasar Java sareng Scala (diperlukeun pikeun aktip ngagunakeun Spark, salah sahiji kerangka paling populér pikeun gawé bareng data badag).
- Kamampuhan pikeun digawekeun ku Hadoop.
Nya, sabaraha analis Big Data earn?
Spesialis Big Data ayeuna kakurangan; paménta ngaleuwihan suplai. Ieu kusabab bisnis geus datang ka pamahaman: ngembangkeun merlukeun téknologi anyar, sarta ngembangkeun téhnologi merlukeun spesialis.
Janten, Data Scientist sareng Data Analytics di AS nurutkeun agénsi recruiting Glassdoor. Gaji rata-rata spesialis ieu di Amérika dimimitian ti $100 rébu per taun.
Di Rusia, spesialis mesin learning nampi ti 130 nepi ka 300 sarébu rubles per bulan, analis data badag - ti 73 nepi ka 200 sarébu rubles per bulan. Éta sadayana gumantung kana pangalaman sareng kualifikasi. Tangtosna, aya lowongan kalayan gaji anu langkung handap, sareng anu sanésna anu langkung luhur. paménta maksimum pikeun analis data badag di Moscow jeung St. Moscow, nu teu héran, akun pikeun ngeunaan 50% tina lowongan aktip (nurutkeun hh.ru). Paménta langkung seueur di Minsk sareng Kyiv. Perlu dicatet yén sababaraha lowongan nawiskeun jam anu fleksibel sareng padamelan jarak jauh. Tapi sacara umum, perusahaan peryogi spesialis anu damel di kantor.
Kana waktu, urang bisa ngaharepkeun kanaékan paménta pikeun analis Big Data sarta wawakil specialties patali. Sakumaha didadarkeun di luhur, kakurangan tanaga dina sektor téknologi teu acan dibatalkeun. Tapi, tangtosna, pikeun janten analis Big Data, anjeun kedah diajar sareng damel, ningkatkeun kamampuan anu didaptarkeun di luhur sareng tambahan. Salah sahiji kasempetan pikeun ngamimitian jalur analis Big Data nyaéta sarta coba leungeun anjeun dina gawé bareng data badag.
sumber: www.habr.com