Mnogi strani autori slažu se da je eri Big Data došao kraj. I u ovom slučaju, pojam Big Data odnosi se na tehnologije temeljene na Hadoopu. Mnogi autori čak mogu pouzdano navesti datum kada su Big Data napustili ovaj svijet, a taj datum je 05.06.2019.
Što se dogodilo na ovaj značajan dan?
Na današnji dan MAPR je obećao obustavu rada ako ne pronađe sredstva za daljnji rad. MAPR je kasnije kupio HP u kolovozu 2019. Ali vraćajući se na lipanj, ne možemo ne primijetiti tragediju ovog razdoblja za tržište Big Data. Ovog mjeseca došlo je do kolapsa cijena dionica CLOUDERE, vodećeg igrača na označenom tržištu, koja se u siječnju iste godine spojila s kronično neprofitabilnim HORTOWORKSOM. Pad je bio prilično značajan i iznosio je 43%; u konačnici je kapitalizacija CLOUDERA-e smanjena s 4,1 na 1,4 milijarde dolara.
Nemoguće je ne reći da glasine o mjehuru na području Hadoop tehnologija kruže od prosinca 2014., no hrabro su se održale još gotovo pet godina. Te su se glasine temeljile na odbijanju Googlea, tvrtke u kojoj je Hadoop tehnologija nastala, od svog izuma. No tehnologija je uhvatila korijenje tijekom prelaska tvrtki na alate za obradu u oblaku i brzog razvoja umjetne inteligencije. Stoga, gledajući unatrag, možemo sa sigurnošću reći da je smrt bila očekivana.
Time je era Big Data došla kraju, no u procesu rada na Big Data tvrtke su shvatile sve nijanse rada na njemu, prednosti koje Big Data može donijeti poslovanju, a također su naučile koristiti umjetne inteligenciju za izvlačenje vrijednosti iz sirovih podataka.
Još zanimljivije postaje pitanje što će zamijeniti ovu tehnologiju i kako će se analitičke tehnologije dalje razvijati.
Proširena analitika
Tijekom opisanih događaja, tvrtke koje se bave analizom podataka nisu mirovale. Što se može prosuditi na temelju informacija o transakcijama koje su se dogodile u 2019. Ove godine provedena je najveća transakcija na tržištu - kupnja analitičke platforme Tableau od strane Salesforcea za 15,7 milijardi dolara. Do manjeg dogovora došlo je između Googlea i Lookera. I naravno, ne može se ne primijetiti akvizicija velike podatkovne platforme Attunity od strane Qlika.
Lideri BI tržišta i stručnjaci Gartnera najavljuju veliku promjenu u pristupu analizi podataka; ta će promjena u potpunosti uništiti BI tržište i dovesti do zamjene BI AI-jem. U tom kontekstu treba napomenuti da kratica AI nije “Umjetna inteligencija” već “Proširena inteligencija”. Pogledajmo pobliže što stoji iza riječi "Augmented Analytics".
Proširena analitika, kao i proširena stvarnost, temelji se na nekoliko općih postulata:
- sposobnost komuniciranja korištenjem NLP-a (Natural Language Processing), tj. ljudskim jezikom;
- korištenje umjetne inteligencije, to znači da će podatke prethodno obraditi strojna inteligencija;
- i naravno, preporuke dostupne korisniku sustava, a koje je generirala umjetna inteligencija.
Prema proizvođačima analitičkih platformi, njihovo će korištenje biti dostupno korisnicima koji nemaju posebne vještine, poput poznavanja SQL-a ili sličnog skriptnog jezika, koji nemaju statističku ili matematičku obuku, koji ne poznaju popularne jezike specijalizirana za obradu podataka i pripadajuće knjižnice. Takvi ljudi, nazvani "Citizen Data Scientists", moraju imati samo izvanredne poslovne kvalifikacije. Njihov je zadatak uhvatiti poslovne uvide iz savjeta i predviđanja koje će im dati umjetna inteligencija, a svoja nagađanja mogu poboljšati pomoću NLP-a.
Opisujući proces rada korisnika sa sustavima ove klase, može se zamisliti sljedeća slika. Osoba koja dolazi na posao i pokreće odgovarajuću aplikaciju, osim uobičajenog skupa izvješća i nadzornih ploča koje je moguće analizirati standardnim pristupima (sortiranje, grupiranje, izvođenje aritmetičkih operacija), vidi određene savjete i preporuke, otprilike: „U da biste ostvarili KPI, broj prodaja, trebate primijeniti popust na proizvode iz kategorije “Vrtlarstvo”. Osim toga, osoba se može obratiti korporativnom glasniku: Skype, Slack itd. Može robotu postavljati pitanja, porukom ili glasom: "Dajte mi pet najprofitabilnijih klijenata." Nakon što je dobio odgovarajući odgovor, mora donijeti najbolju odluku na temelju svog poslovnog iskustva i donijeti profit tvrtki.
Ako napravite korak unatrag i pogledate sastav informacija koje se analiziraju, iu ovoj fazi, proizvodi proširene analitike mogu olakšati živote ljudi. U idealnom slučaju, pretpostavlja se da će korisnik analitički proizvod trebati samo uputiti na izvore željenih informacija, a sam program će se pobrinuti za izradu podatkovnog modela, povezivanje tablica i slične poslove.
Sve to bi prije svega trebalo osigurati “demokratizaciju” podataka, tj. Svatko može analizirati cijeli niz informacija dostupnih tvrtki. Proces donošenja odluka mora biti podržan metodama statističke analize. Vrijeme pristupa podacima treba biti minimalno, tako da nema potrebe za pisanjem skripti i SQL upita. I naravno, možete uštedjeti novac na visoko plaćenim stručnjacima za znanost podataka.
Hipotetski, tehnologija nudi vrlo dobre izglede za poslovanje.
Što zamjenjuje Big Data
No, zapravo sam započeo svoj članak s Big Data. Ne bih mogao razviti ovu temu bez kratkog izleta u moderne BI alate, čija je osnova često Big Data. Sudbina big data sada je jasno određena, a to je tehnologija u oblaku. Usredotočio sam se na dogovore sklopljene s BI dobavljačima kako bih pokazao da sada svaki analitički sustav iza sebe ima pohranu u oblaku, a usluge u oblaku imaju BI kao prednji kraj.
Ne zaboravljajući na takve stupove u području baza podataka kao što su ORACLE i Microsoft, potrebno je napomenuti njihov odabrani smjer razvoja poslovanja, a to je oblak. Sve ponuđene usluge mogu se pronaći u oblaku, ali neke usluge u oblaku više nisu dostupne on-premise. Obavili su značajan posao na korištenju modela strojnog učenja, stvorili su biblioteke dostupne korisnicima i konfigurirali sučelja za lakši rad s modelima od njihovog odabira do postavljanja vremena početka.
Još jedna važna prednost korištenja usluga u oblaku, koju su izrazili proizvođači, je dostupnost gotovo neograničenih skupova podataka o bilo kojoj temi za modele obuke.
No, postavlja se pitanje koliko će cloud tehnologije zaživjeti kod nas?
Izvor: www.habr.com