Shumë autorë të huaj pajtohen se epoka e Big Data ka marrë fund. Dhe në këtë rast, termi Big Data i referohet teknologjive të bazuara në Hadoop. Shumë autorë madje mund të emërtojnë me siguri datën kur Big Data u largua nga kjo botë dhe kjo datë është 05.06.2019.
Çfarë ndodhi në këtë ditë të rëndësishme?
Në këtë ditë, MAPR premtoi se do të ndërpresë punën e saj nëse nuk mund të gjejë mjete për funksionim të mëtejshëm. MAPR u ble më vonë nga HP në gusht 2019. Por duke u kthyer në qershor, nuk mund të mos vihet re tragjedia e kësaj periudhe për tregun e Big Data. Këtë muaj, pati një kolaps në çmimet e aksioneve të CLOUDERA, një lojtar lider në tregun e caktuar, i cili u bashkua me HORTOWORKS kronike jofitimprurëse në janar të të njëjtit vit. Kolapsi ishte mjaft domethënës dhe arriti në 43% në fund, kapitalizimi i CLOUDERA u ul nga 4,1 në 1,4 miliardë dollarë.
Është e pamundur të mos thuhet se thashethemet për një flluskë në fushën e teknologjive të bazuara në Hadoop kanë qarkulluar që nga dhjetori i vitit 2014, por ajo qëndroi me guxim për gati pesë vjet të tjera. Këto thashetheme bazoheshin në refuzimin e Google, kompanisë nga e ka origjinën teknologjia Hadoop, nga shpikja e saj. Por teknologjia zuri rrënjë gjatë kalimit të kompanive në mjetet e përpunimit të cloud dhe zhvillimit të shpejtë të inteligjencës artificiale. Prandaj, duke parë pas, mund të themi me besim se vdekja pritej.
Kështu, epoka e Big Data ka marrë fund, por në procesin e punës në Big Data, kompanitë kanë kuptuar të gjitha nuancat e punës në to, përfitimet që Big Data mund t'i sjellë biznesit, si dhe kanë mësuar të përdorin artificiale. inteligjencë për të nxjerrë vlerë nga të dhënat e papërpunuara.
Më interesante bëhet pyetja se çfarë do ta zëvendësojë këtë teknologji dhe si do të zhvillohen më tej teknologjitë analitike.
Analiza e shtuar
Gjatë ngjarjeve të përshkruara, kompanitë që punojnë në fushën e analizës së të dhënave nuk u ulën. Çfarë mund të gjykohet bazuar në informacionin për transaksionet e ndodhura në vitin 2019. Këtë vit u krye transaksioni më i madh në treg - blerja e platformës analitike Tableau nga Salesforce për 15,7 miliardë dollarë. Një marrëveshje më e vogël ndodhi midis Google dhe Looker. Dhe sigurisht, nuk mund të mos përmendet blerja nga Qlik e platformës së të dhënave të mëdha Attunity.
Udhëheqësit e tregut të BI-së dhe ekspertët e Gartner-it po shpallin një ndryshim monumental në qasjet ndaj analizës së të dhënave, ky ndryshim do të shkatërrojë plotësisht tregun e BI-së dhe do të çojë në zëvendësimin e BI-së me AI; Në këtë kontekst, duhet theksuar se shkurtesa AI nuk është “Inteligjencë artificiale” por “Inteligjencë e shtuar”. Le të hedhim një vështrim më të afërt se çfarë fshihet pas fjalëve "Augmented Analytics".
Analitika e shtuar, si realiteti i shtuar, bazohet në disa postulate të përgjithshme:
- aftësia për të komunikuar duke përdorur NLP (Natural Language Processing), d.m.th. në gjuhën njerëzore;
- përdorimi i inteligjencës artificiale, kjo do të thotë se të dhënat do të përpunohen paraprakisht nga inteligjenca e makinerisë;
- dhe sigurisht, rekomandimet në dispozicion të përdoruesit të sistemit, të cilat janë krijuar nga inteligjenca artificiale.
Sipas prodhuesve të platformave analitike, përdorimi i tyre do të jetë i disponueshëm për përdoruesit që nuk kanë aftësi të veçanta, si njohja e SQL ose një gjuhë e ngjashme skriptimi, të cilët nuk kanë trajnime statistikore ose matematikore, të cilët nuk kanë njohuri për gjuhët e njohura. i specializuar në përpunimin e të dhënave dhe bibliotekat përkatëse. Njerëz të tillë, të quajtur "Shkencëtarët e të Dhënave Qytetare", duhet të kenë vetëm kualifikime të shkëlqyera biznesi. Detyra e tyre është të kapin njohuritë e biznesit nga këshillat dhe parashikimet që do t'u japë inteligjenca artificiale dhe ata mund të përsosin supozimet e tyre duke përdorur NLP.
Duke përshkruar procesin e përdoruesve që punojnë me sistemet e kësaj klase, mund të imagjinohet fotografia e mëposhtme. Një person, duke ardhur në punë dhe duke nisur aplikacionin përkatës, përveç grupit të zakonshëm të raporteve dhe tabelave që mund të analizohen duke përdorur qasje standarde (rendimi, grupimi, kryerja e operacioneve aritmetike), sheh disa këshilla dhe rekomandime, diçka si: "Në për të arritur KPI, numrin e shitjeve, duhet të aplikoni një zbritje në produktet nga kategoria "Kopshtaria". Për më tepër, një person mund të kontaktojë një lajmëtar të korporatës: Skype, Slack, etj. Mund t'i bëjë robotit pyetje, me tekst ose zë: "Më jepni pesë klientët më fitimprurës". Pasi ka marrë përgjigjen e duhur, ai duhet të marrë vendimin më të mirë bazuar në përvojën e tij të biznesit dhe t'i sjellë fitim kompanisë.
Nëse bëni një hap prapa dhe shikoni përbërjen e informacionit që analizohet, dhe në këtë fazë, produktet analitike të shtuara mund ta bëjnë jetën e njerëzve më të lehtë. Në mënyrë ideale, supozohet se përdoruesi do të duhet vetëm të drejtojë produktin analitik në burimet e informacionit të dëshiruar, dhe vetë programi do të kujdeset për krijimin e një modeli të dhënash, lidhjen e tabelave dhe detyra të ngjashme.
E gjithë kjo, para së gjithash, duhet të sigurojë “demokratizimin” e të dhënave, d.m.th. Çdo person mund të analizojë të gjithë grupin e informacionit në dispozicion të kompanisë. Procesi i vendimmarrjes duhet të mbështetet nga metodat e analizës statistikore. Koha e hyrjes në të dhënat duhet të jetë minimale, kështu që nuk ka nevojë të shkruani skripta dhe pyetje SQL. Dhe sigurisht, ju mund të kurseni para për specialistë të Shkencës së të Dhënave me pagesë të lartë.
Hipotetikisht, teknologjia ofron perspektiva shumë të ndritshme për biznesin.
Çfarë zëvendëson Big Data
Por, në fakt, artikullin tim e nisa me Big Data. Dhe nuk mund ta zhvilloja këtë temë pa një ekskursion të shkurtër në mjetet moderne të BI, baza për të cilat shpesh janë Big Data. Fati i të dhënave të mëdha tani është përcaktuar qartë, dhe është teknologjia cloud. Unë u fokusova në transaksionet e bëra me shitësit e BI-së për të demonstruar se tani çdo sistem analitik ka ruajtje në renë kompjuterike pas tij dhe shërbimet cloud kanë BI-në si pjesën e përparme.
Duke mos harruar për shtylla të tilla në fushën e bazave të të dhënave si ORACLE dhe Microsoft, është e nevojshme të theksohet drejtimi i tyre i zgjedhur i zhvillimit të biznesit dhe ky është cloud. Të gjitha shërbimet e ofruara mund të gjenden në renë kompjuterike, por disa shërbime cloud nuk janë më të disponueshme në premisë. Ata kanë bërë punë të rëndësishme në përdorimin e modeleve të mësimit të makinerive, kanë krijuar biblioteka të disponueshme për përdoruesit dhe kanë konfiguruar ndërfaqe për lehtësinë e punës me modelet nga zgjedhja e tyre deri te caktimi i kohës së fillimit.
Një avantazh tjetër i rëndësishëm i përdorimit të shërbimeve cloud, i cili shprehet nga prodhuesit, është disponueshmëria e grupeve pothuajse të pakufizuara të të dhënave për çdo temë për modelet e trajnimit.
Megjithatë, lind pyetja: deri ku do të zënë rrënjë teknologjitë cloud në vendin tonë?
Burimi: www.habr.com