Banyak penulis asing yang sepakat bahwa era Big Data telah berakhir. Dan dalam hal ini, istilah Big Data mengacu pada teknologi berbasis Hadoop. Banyak penulis bahkan dengan percaya diri menyebutkan tanggal Big Data meninggalkan dunia ini dan tanggal tersebut adalah 05.06.2019/XNUMX/XNUMX.
Apa yang terjadi pada hari penting ini?
Pada hari ini, MAPR berjanji akan menghentikan pekerjaannya jika tidak dapat memperoleh dana untuk operasi selanjutnya. MAPR kemudian diakuisisi oleh HP pada Agustus 2019. Namun kembali ke bulan Juni, kita tidak bisa tidak memperhatikan tragedi periode ini untuk pasar Big Data. Bulan ini terjadi jatuhnya harga saham CLOUDERA, pemain terkemuka di pasar, yang bergabung dengan HORTOWORKS yang sangat merugi pada bulan Januari di tahun yang sama. Keruntuhannya cukup signifikan sebesar 43%, pada akhirnya kapitalisasi CLOUDERA turun dari 4,1 menjadi 1,4 miliar dolar.
Tidak mungkin untuk tidak mengatakan bahwa rumor tentang gelembung di bidang teknologi berbasis Hadoop telah beredar sejak Desember 2014, namun rumor tersebut bertahan dengan berani selama hampir lima tahun berikutnya. Rumor tersebut didasari oleh penolakan Google, perusahaan asal teknologi Hadoop, terhadap penemuannya. Namun teknologi ini berakar pada transisi perusahaan ke alat pemrosesan cloud dan pesatnya perkembangan kecerdasan buatan. Oleh karena itu, melihat ke belakang, kita dapat mengatakan dengan yakin bahwa kematian sudah diperkirakan.
Dengan demikian, era Big Data telah berakhir, namun dalam proses pengerjaan Big Data, perusahaan telah menyadari semua nuansa pengerjaannya, manfaat yang dapat diberikan Big Data bagi bisnis, dan juga belajar menggunakan teknologi buatan. kecerdasan untuk mengekstrak nilai dari data mentah.
Yang lebih menarik adalah pertanyaan tentang apa yang akan menggantikan teknologi ini dan bagaimana teknologi analitik akan berkembang lebih jauh.
Analisis yang Ditambah
Dalam peristiwa yang dijelaskan, perusahaan yang bergerak di bidang analisis data tidak tinggal diam. Apa yang bisa dinilai berdasarkan informasi transaksi yang terjadi pada tahun 2019. Tahun ini, transaksi terbesar di pasar dilakukan - akuisisi platform analitik Tableau oleh Salesforce senilai $15,7 miliar. Kesepakatan yang lebih kecil terjadi antara Google dan Looker. Dan tentu saja, kita tidak bisa tidak memperhatikan akuisisi Qlik atas platform data besar Attunity.
Para pemimpin pasar BI dan pakar Gartner mengumumkan perubahan besar dalam pendekatan analisis data; perubahan ini akan menghancurkan pasar BI sepenuhnya dan mengarah pada penggantian BI dengan AI. Dalam konteks ini, perlu diperhatikan bahwa singkatan AI bukanlah “Artificial Intelligence” melainkan “Augmented Intelligence”. Mari kita lihat lebih dekat apa yang ada di balik kata "Augmented Analytics".
Analisis tertambah, seperti augmented reality, didasarkan pada beberapa postulat umum:
- kemampuan berkomunikasi menggunakan NLP (Natural Language Processing), yaitu dalam bahasa manusia;
- penggunaan kecerdasan buatan, artinya data akan diproses terlebih dahulu oleh kecerdasan mesin;
- dan tentu saja, rekomendasi yang tersedia bagi pengguna sistem, yang dihasilkan oleh kecerdasan buatan.
Menurut produsen platform analitik, penggunaannya akan tersedia bagi pengguna yang tidak memiliki keahlian khusus, seperti pengetahuan SQL atau bahasa skrip serupa, yang tidak memiliki pelatihan statistik atau matematika, yang tidak memiliki pengetahuan bahasa populer. mengkhususkan diri dalam pemrosesan data dan perpustakaan terkait. Orang-orang seperti itu, yang disebut "Ilmuwan Data Warga", harus memiliki kualifikasi bisnis yang luar biasa. Tugas mereka adalah menangkap wawasan bisnis dari tip dan perkiraan yang diberikan oleh kecerdasan buatan, dan mereka dapat menyempurnakan tebakannya menggunakan NLP.
Menggambarkan proses pengguna bekerja dengan sistem kelas ini, kita dapat membayangkan gambar berikut. Seseorang, yang mulai bekerja dan meluncurkan aplikasi terkait, selain kumpulan laporan dan dasbor biasa yang dapat dianalisis menggunakan pendekatan standar (menyortir, mengelompokkan, melakukan operasi aritmatika), melihat tip dan rekomendasi tertentu, seperti: “Dalam untuk mencapai KPI, jumlah penjualan, Anda harus menerapkan diskon pada produk dari kategori “Berkebun”.” Selain itu, seseorang dapat menghubungi utusan perusahaan: Skype, Slack, dll. Dapat mengajukan pertanyaan kepada robot, melalui teks atau suara: “Beri saya lima klien yang paling menguntungkan.” Setelah mendapat jawaban yang tepat, ia harus mengambil keputusan terbaik berdasarkan pengalaman bisnisnya dan mendatangkan keuntungan bagi perusahaan.
Jika Anda mengambil langkah mundur dan melihat komposisi informasi yang dianalisis, dan pada tahap ini, produk analisis yang ditambah dapat membuat hidup masyarakat lebih mudah. Idealnya, diasumsikan bahwa pengguna hanya perlu mengarahkan produk analitis ke sumber informasi yang diinginkan, dan program itu sendiri akan membuat model data, menghubungkan tabel, dan tugas serupa.
Semua ini, pertama-tama, harus memastikan “demokratisasi” data, yaitu Siapa pun dapat menganalisis seluruh rangkaian informasi yang tersedia bagi perusahaan. Proses pengambilan keputusan harus didukung dengan metode analisis statistik. Waktu akses data harus minimal, sehingga tidak perlu menulis skrip dan kueri SQL. Dan tentu saja, Anda dapat menghemat uang untuk membeli spesialis Ilmu Data dengan bayaran tinggi.
Secara hipotesis, teknologi menawarkan prospek bisnis yang sangat cerah.
Apa yang menggantikan Big Data?
Namun sebenarnya, saya memulai artikel saya dengan Big Data. Dan saya tidak dapat mengembangkan topik ini tanpa penjelasan singkat tentang alat BI modern, yang sering kali didasarkan pada Big Data. Nasib big data kini sudah ditentukan dengan jelas, dan itu adalah teknologi cloud. Saya fokus pada transaksi yang dilakukan dengan vendor BI untuk menunjukkan bahwa sekarang setiap sistem analitik memiliki penyimpanan cloud di belakangnya, dan layanan cloud memiliki BI sebagai ujung depannya.
Tidak melupakan pilar-pilar di bidang database seperti ORACLE dan Microsoft, perlu diperhatikan arah pengembangan bisnis yang mereka pilih dan ini adalah cloud. Semua layanan yang ditawarkan dapat ditemukan di cloud, namun beberapa layanan cloud tidak lagi tersedia di lokasi. Mereka telah melakukan pekerjaan signifikan dalam penggunaan model pembelajaran mesin, membuat perpustakaan yang tersedia bagi pengguna, dan mengonfigurasi antarmuka untuk kemudahan bekerja dengan model mulai dari memilihnya hingga mengatur waktu mulai.
Keuntungan penting lainnya menggunakan layanan cloud, yang diumumkan oleh produsen, adalah ketersediaan kumpulan data yang hampir tidak terbatas tentang topik apa pun untuk model pelatihan.
Namun, timbul pertanyaan: sejauh mana teknologi cloud akan mengakar di negara kita?
Sumber: www.habr.com