Birçok yabancı yazar Büyük Veri çağının sona erdiği konusunda hemfikir. Ve bu durumda Büyük Veri terimi, Hadoop'a dayalı teknolojileri ifade etmektedir. Hatta birçok yazar, Büyük Veri'nin bu dünyadan ayrıldığı tarihi bile güvenle söyleyebilir ve bu tarih 05.06.2019/XNUMX/XNUMX'dur.
Bu önemli günde neler yaşandı?
Bu günde MAPR, daha fazla operasyon için fon bulamazsa çalışmalarını askıya alma sözü verdi. MAPR daha sonra Ağustos 2019'da HP tarafından satın alındı. Ancak haziran ayına dönersek, bu dönemin Büyük Veri pazarı açısından trajedisini fark etmeden duramayız. Bu ay, aynı yılın Ocak ayında kronik olarak kâr etmeyen HORTOWORKS ile birleşen, piyasanın önde gelen oyuncularından CLOUDERA'nın hisse senedi fiyatlarında bir çöküş görüldü. Çöküş oldukça ciddiydi ve %43'e ulaştı; sonuçta CLOUDERA'nın sermayesi 4,1 milyar dolardan 1,4 milyar dolara düştü.
Hadoop tabanlı teknolojiler alanında bir balonun söylentilerinin Aralık 2014'ten bu yana dolaştığını söylememek mümkün değil, ancak bu söylentiler neredeyse beş yıl daha cesurca devam etti. Bu söylentiler, Hadoop teknolojisinin ortaya çıktığı şirket olan Google'ın buluşunu reddetmesine dayanıyordu. Ancak teknoloji, şirketlerin bulut işleme araçlarına geçişi ve yapay zekanın hızlı gelişimi sırasında kök saldı. Dolayısıyla geriye dönüp baktığımızda ölümün beklendiğini rahatlıkla söyleyebiliriz.
Böylece Büyük Veri dönemi sona erdi, ancak Büyük Veri üzerinde çalışma sürecinde şirketler üzerinde çalışmanın tüm nüanslarını, Büyük Veri'nin işe getirebileceği faydaları fark ettiler ve ayrıca yapay verileri kullanmayı öğrendiler. Ham verilerden değer elde etmek için zeka.
Bu teknolojinin yerini neyin alacağı ve analitik teknolojilerinin nasıl daha da gelişeceği sorusu daha da ilginç hale geliyor.
Artırılmış Analitik
Anlatılan olaylar sırasında veri analizi alanında çalışan şirketler de yerinde durmadı. 2019 yılında gerçekleşen işlemlere ilişkin bilgilere dayanarak neler değerlendirilebilir? Bu yıl pazardaki en büyük işlem gerçekleştirildi: Tableau analiz platformunun Salesforce tarafından 15,7 milyar dolara satın alınması. Google ile Looker arasında daha küçük bir anlaşma gerçekleşti. Ve elbette Qlik'in büyük veri platformu Attunity'yi satın aldığını da unutmamak mümkün değil.
BI pazar liderleri ve Gartner uzmanları, veri analizi yaklaşımlarında muazzam bir değişim olduğunu duyuruyor; bu değişim BI pazarını tamamen yok edecek ve BI'nın yerini yapay zekanın almasına yol açacak. Bu bağlamda AI kısaltmasının “Yapay zeka” değil, “Artırılmış Zeka” olduğunu belirtelim. "Artırılmış Analitik" kelimesinin arkasında ne olduğuna daha yakından bakalım.
Artırılmış gerçeklik gibi artırılmış analitikler de birkaç genel varsayıma dayanmaktadır:
- NLP (Doğal Dil İşleme) kullanarak iletişim kurma yeteneği, yani. insan dilinde;
- yapay zekanın kullanılması, verilerin makine zekası tarafından ön işleme tabi tutulacağı anlamına gelir;
- ve tabii ki sistemin kullanıcısına sunulan, yapay zeka tarafından üretilen öneriler.
Analitik platform üreticilerine göre bunların kullanımı, SQL bilgisi veya benzer bir betik dili bilgisi gibi özel becerilere sahip olmayan, istatistik veya matematik eğitimi olmayan, popüler diller hakkında bilgisi olmayan kullanıcılara sunulacak. veri işleme ve ilgili kütüphaneler konusunda uzmanlaşmıştır. "Vatandaş Veri Bilimcileri" olarak adlandırılan bu tür kişilerin yalnızca olağanüstü ticari niteliklere sahip olması gerekir. Görevleri, yapay zekanın onlara vereceği ipuçlarından ve tahminlerden iş öngörüleri elde etmektir ve NLP'yi kullanarak tahminlerini hassaslaştırabilirler.
Kullanıcıların bu sınıftaki sistemlerle çalışma sürecini anlatan aşağıdaki resim hayal edilebilir. Standart yaklaşımlar (sıralama, gruplandırma, aritmetik işlemler gerçekleştirme) kullanılarak analiz edilebilecek olağan rapor ve gösterge tablolarına ek olarak, işe gelen ve ilgili uygulamayı başlatan bir kişi, aşağıdaki gibi bazı ipuçları ve öneriler görür: “İçinde KPI, satış adedine ulaşmak için “Bahçe” kategorisindeki ürünlerde indirim uygulamalısınız.” Ek olarak, kişi kurumsal bir mesajlaşma aracıyla iletişime geçebilir: Skype, Slack vb. Robota yazılı veya sesli sorular sorabilir: "Bana en kârlı beş müşteriyi verin." Uygun cevabı aldıktan sonra iş tecrübesine dayanarak en iyi kararı vermeli ve şirkete kâr getirmelidir.
Bir adım geriye gidip analiz edilen bilgilerin bileşimine bakarsanız, bu aşamada artırılmış analitik ürünleri insanların hayatlarını kolaylaştırabilir. İdeal olarak, kullanıcının yalnızca analitik ürünü istenen bilgilerin kaynaklarına yönlendirmesi gerektiği ve programın kendisinin bir veri modeli oluşturma, tabloları bağlama ve benzeri görevleri üstleneceği varsayılır.
Bütün bunlar, her şeyden önce verilerin “demokratikleşmesini” sağlamalıdır; Herhangi bir kişi, şirketin kullanabileceği tüm bilgi dizisini analiz edebilir. Karar verme süreci istatistiksel analiz yöntemleriyle desteklenmelidir. Veri erişim süresi minimum düzeyde olmalıdır, bu nedenle komut dosyaları ve SQL sorguları yazmaya gerek yoktur. Ve elbette, yüksek maaşlı Veri Bilimi uzmanlarından tasarruf edebilirsiniz.
Varsayımsal olarak teknoloji iş dünyası için çok parlak fırsatlar sunuyor.
Büyük Verinin yerini ne alıyor?
Ama aslında yazıma Büyük Veri ile başladım. Temelini genellikle Büyük Veri'nin oluşturduğu modern BI araçlarına kısa bir göz atmadan bu konuyu geliştiremezdim. Büyük verinin kaderi artık net bir şekilde belirlendi ve o da bulut teknolojisi. Artık her analitik sistemin arkasında bulut depolama alanı bulunduğunu ve bulut hizmetlerinin ön uç olarak BI'ya sahip olduğunu göstermek için BI tedarikçileriyle yapılan anlaşmalara odaklandım.
ORACLE ve Microsoft gibi veritabanları alanındaki bu tür temelleri unutmadan, iş geliştirme için seçtikleri yöne dikkat etmek gerekir ve bu da buluttur. Sunulan tüm hizmetler bulutta bulunabilir, ancak bazı bulut hizmetleri artık şirket içinde mevcut değildir. Makine öğrenimi modellerinin kullanımı, kullanıcıların kullanımına sunulan kitaplıklar oluşturma ve modellerin seçiminden başlangıç zamanının ayarlanmasına kadar modellerle çalışmayı kolaylaştırmak için arayüzler yapılandırma konusunda önemli çalışmalar yaptılar.
Bulut hizmetlerini kullanmanın üreticiler tarafından dile getirilen bir diğer önemli avantajı ise eğitim modelleri için her konuda neredeyse sınırsız veri setinin mevcut olmasıdır.
Ancak şu soru ortaya çıkıyor: Bulut teknolojileri ülkemizde ne kadar kök salacak?
Kaynak: habr.com