Saiki mung wong sing ora duwe sambungan eksternal karo jagad njaba sing durung krungu babagan data gedhe. Ing HabrΓ©, topik analytics Big Data lan topik sing gegandhengan populer. Nanging kanggo non-spesialis sing pengin nyinaoni babagan Big Data, ora mesthi jelas apa prospek wilayah iki, ing ngendi analytics Big Data bisa diterapake lan analis sing apik bisa dipercaya. Ayo dadi nyoba kanggo mangerteni.
Jumlah informasi sing diasilake manungsa mundhak saben taun. Ing taun 2020, jumlah data sing disimpen bakal mundhak dadi 40-44 zettabyte (1 ZB ~ 1 milyar GB). Ing taun 2025 - nganti kira-kira 400 zettabyte. Mulane, ngatur data terstruktur lan ora terstruktur nggunakake teknologi modern minangka area sing saya tambah penting. Perusahaan individu lan kabeh negara kasengsem ing data gedhe.
Miturut cara kasebut, nalika diskusi babagan boom informasi lan cara ngolah data sing digawe manungsa, istilah Big Data muncul. Dipercaya manawa iki pisanan diusulake ing 2008 dening editor jurnal Nature, Clifford Lynch.
Wiwit kuwi, pasar Big Data mundhak saben taun nganti pirang-pirang puluh persen. Lan tren iki, miturut para ahli, bakal terus. Mangkono, miturut perkiraan perusahaan ing 2021, total pasar analytics data gedhe global bakal mundhak dadi $ 67,2 milyar. Wutah taunan bakal udakara 35,9%.
Napa kita butuh analytics data gedhe?
Iki ngidini sampeyan ngenali informasi sing larang banget saka set data sing terstruktur utawa ora terstruktur. Thanks kanggo iki, bisnis bisa, contone, ngenali tren, prΓ©dhiksi kinerja produksi lan ngoptimalake biaya dhewe. Cetha yen kanggo nyuda biaya, perusahaan wis siyap ngetrapake solusi paling anyar.
Teknologi lan metode analisis sing digunakake kanggo nganalisa Big Data:
- Data Mining;
- crowdsourcing;
- campuran lan integrasi data;
- sinau mesin;
- jaringan syaraf tiruan;
- pangenalan pola;
- analisis prediktif;
- modeling simulasi;
- analisis spasial;
- analisis statistik;
- visualisasi data analitik.
Analisis Big Data ing jagad iki
Analisis data gedhe saiki digunakake dening luwih saka 50% perusahaan ing saindenging jagad. Senadyan kasunyatan sing ing 2015 angka iki mung 17%. Big Data paling aktif digunakake dening perusahaan sing makarya ing sektor telekomunikasi lan layanan finansial. Banjur ana perusahaan sing duwe spesialisasi ing teknologi kesehatan. Panggunaan minimal saka analytics Big Data ing perusahaan pendidikan: ing umume kasus, wakil saka lapangan iki ngumumake niat kanggo nggunakake teknologi ing mangsa ngarep.
Ing Amerika Serikat, analisis Big Data digunakake paling aktif: luwih saka 55% perusahaan saka macem-macem lapangan nggarap teknologi iki. Ing Eropa lan Asia, panjaluk analytics data gedhe ora luwih murah - udakara 53%.
Lan babagan Rusia?
Miturut analis IDC,. Wutah pasar kanggo solusi kasebut ing Eropa Tengah lan WΓ©tan cukup aktif, angka iki mundhak 11% saben taun. Ing taun 2022, bakal tekan $5,4 milyar ing istilah kuantitatif.
Kanthi akeh cara, pangembangan pasar sing cepet iki amarga tuwuhing wilayah iki ing Rusia. Ing 2018, revenue saka adol solusi sing relevan ing Federasi Rusia udakara 40% saka total investasi ing teknologi pangolahan Big Data ing kabeh wilayah.
Ing Federasi Rusia, perusahaan saka sektor perbankan lan publik, industri telekomunikasi lan industri mbuwang paling akeh kanggo pangolahan Big Data.
Apa sing ditindakake dening Analyst Big Data lan pira regane ing Rusia?
Analis data gedhe tanggung jawab kanggo mriksa akeh informasi, semi-terstruktur lan ora terstruktur. Kanggo organisasi perbankan iki minangka transaksi, kanggo operator - telpon lan lalu lintas, ing toko - kunjungan lan tuku pelanggan. Kaya kasebut ing ndhuwur, analisis Big Data ngidini kita nemokake sambungan antarane macem-macem faktor ing "sejarah informasi mentah", contone, proses produksi utawa reaksi kimia. Adhedhasar data analisis, pendekatan lan solusi anyar dikembangake ing macem-macem wilayah - saka manufaktur nganti obat.
Katrampilan sing dibutuhake kanggo analis Big Data:
- Kemampuan kanggo ngerteni kanthi cepet fitur ing wilayah sing analisa ditindakake, lan nyemplungake dhewe ing aspek wilayah sing dikarepake. Iki bisa dadi ritel, industri minyak lan gas, obat-obatan, lsp.
- Kawruh babagan metode analisis data statistik, konstruksi model matematika (jaringan saraf, jaringan Bayesian, clustering, regresi, faktor, varian lan analisis korelasi, lsp).
- Bisa ngekstrak data saka macem-macem sumber, ngowahi kanggo analisis, lan mbukak menyang database analitis.
- Mahir ing SQL.
- Kawruh basa Inggris ing tingkat sing cukup kanggo maca dokumentasi teknis kanthi gampang.
- Kawruh Python (paling ora dhasar), Bash (angel banget kanggo nindakake tanpa ing proses karya), plus iku seng di pengeni kanggo ngerti dhasar saka Jawa lan Scala (dibutuhake kanggo aktif nggunakake Spark, salah siji saka kerangka paling populer kanggo nggarap data gedhe).
- Kemampuan kanggo nggarap Hadoop.
Ya, pira entuk analis Big Data?
Spesialis Big Data saiki kurang; panjaluk ngluwihi pasokan. Iki amarga bisnis wis ngerti: pangembangan mbutuhake teknologi anyar, lan pangembangan teknologi mbutuhake spesialis.
Dadi, Ilmuwan Data lan Analisis Data ing AS miturut agensi recruiting Glassdoor. Gaji rata-rata spesialis kasebut ing Amerika wiwit $ 100 ewu saben taun.
Ing Rusia, spesialis pembelajaran mesin nampa saka 130 nganti 300 ewu rubel saben sasi, analis data gedhe - saka 73 nganti 200 ewu rubel saben sasi. Iku kabeh gumantung ing pengalaman lan kualifikasi. Mesthi wae, ana lowongan kanthi gaji sing luwih murah, lan liya-liyane sing luwih dhuwur. Panjaluk maksimal kanggo analis data gedhe ing Moskow lan St. Moscow, sing ora nggumunake, kira-kira 50% saka lowongan aktif (miturut hh.ru). Kathah kurang dikarepake ing Minsk lan Kyiv. Wigati dicathet yen sawetara lowongan nawakake jam sing fleksibel lan kerja remot. Nanging umume, perusahaan butuh spesialis sing kerja ing kantor.
Swara wektu, kita bisa nyana Tambah ing dikarepake kanggo analis Big Data lan wakil saka spesialisasi gegandhengan. Kaya kasebut ing ndhuwur, kekurangan personel ing sektor teknologi durung dibatalake. Nanging, mesthine, kanggo dadi analis Big Data, sampeyan kudu sinau lan kerja, nambah katrampilan sing kasebut ing ndhuwur lan tambahan. Salah sawijining kesempatan kanggo miwiti jalur analis Big Data yaiku lan coba tangan sampeyan nggarap data gedhe.
Source: www.habr.com