Многи страни аутори се слажу да је ера великих података дошла до краја. И у овом случају, термин Биг Дата се односи на технологије засноване на Хадооп-у. Многи аутори чак могу са сигурношћу да именују датум када су Биг Дата напустили овај свет, а овај датум је 05.06.2019.
Шта се догодило на овај значајан дан?
МАПР је на данашњи дан обећао да ће обуставити рад уколико не нађе средства за даљи рад. МАПР је касније купио ХП у августу 2019. Али, враћајући се у јун, не може се не приметити трагедија овог периода за тржиште великих података. Овог месеца дошло је до колапса цена акција компаније ЦЛОУДЕРА, водећег играча на тржишту, која се у јануару исте године спојила са хронично непрофитабилним ХОРТОВОРКС-ом. Колапс је био прилично значајан и износио је 43%; на крају је капитализација ЦЛОУДЕРА смањена са 4,1 на 1,4 милијарде долара.
Немогуће је не рећи да гласине о балону у области технологија заснованих на Хадооп-у круже од децембра 2014. године, али се храбро држао још скоро пет година. Ове гласине су се заснивале на одбијању Гугла, компаније одакле је настала Хадооп технологија, од њеног проналаска. Али технологија је заживела током транзиције компанија на алате за обраду у облаку и брзог развоја вештачке интелигенције. Стога, гледајући уназад, можемо са сигурношћу рећи да је смрт очекивана.
Тиме је ера великих података дошла до краја, али су у процесу рада на великим подацима компаније схватиле све нијансе рада на њима, предности које велики подаци могу донети пословању, а такође су научиле да користе вештачке податке. интелигенција за извлачење вредности из сирових података.
Све занимљивије постаје питање шта ће заменити ову технологију и како ће се даље развијати аналитичке технологије.
Проширена аналитика
Током описаних догађаја, компаније које раде у области анализе података нису мировале. Шта се може судити на основу информација о трансакцијама које су се десиле у 2019. Ове године је извршена највећа трансакција на тржишту - куповина аналитичке платформе Таблеау од стране компаније Салесфорце за 15,7 милијарди долара. Дошло је до мањег договора између Гугла и Лоокер-а. И наравно, не може се не приметити аквизиција од стране Клик-а велике платформе података Аттунити.
Лидери БИ тржишта и стручњаци Гартнер-а најављују монументалну промену у приступу анализи података; ова промена ће потпуно уништити БИ тржиште и довести до замене БИ-ја са АИ. У овом контексту, треба напоменути да скраћеница АИ није „вештачка интелигенција” већ „проширена интелигенција”. Хајде да ближе погледамо шта се крије иза речи „Проширена аналитика“.
Проширена аналитика, као и проширена стварност, заснива се на неколико општих постулата:
- способност комуницирања коришћењем НЛП-а (Натурал Лангуаге Процессинг), тј. на људском језику;
- коришћење вештачке интелигенције, то значи да ће подаци бити претходно обрађени машинском интелигенцијом;
- и наравно, препоруке доступне кориснику система, које је генерисала вештачка интелигенција.
Како наводе произвођачи аналитичких платформи, њихово коришћење биће доступно корисницима који немају посебне вештине, попут познавања СКЛ-а или сличног скриптног језика, који немају статистичку или математичку обуку, који немају познавање популарних језика. специјализована за обраду података и одговарајуће библиотеке. Такви људи, звани „Цитизен Дата Сциентистс“, морају имати само изванредне пословне квалификације. Њихов задатак је да ухвате пословне увиде из савета и предвиђања које ће им дати вештачка интелигенција, а могу да прецизирају своја нагађања користећи НЛП.
Описујући процес рада корисника са системима ове класе, може се замислити следећа слика. Особа, која долази на посао и покреће одговарајућу апликацију, поред уобичајеног скупа извештаја и контролних табли који се могу анализирати стандардним приступима (сортирање, груписање, извођење аритметичких операција), види одређене савете и препоруке, нешто попут: „У да бисте остварили КПИ, број продаје, потребно је да примените попуст на производе из категорије „Баштанство“. Поред тога, особа може контактирати корпоративни мессенгер: Скипе, Слацк итд. Може да поставља питања роботу, текстом или гласом: „Дај ми пет најпрофитабилнијих клијената.“ Добивши одговарајући одговор, он мора донети најбољу одлуку на основу свог пословног искуства и донети профит компанији.
Ако направите корак уназад и погледате састав информација које се анализирају, у овој фази, производи проширене аналитике могу олакшати живот људима. У идеалном случају, претпоставља се да ће корисник требати само да укаже аналитички производ на изворе жељених информација, а сам програм ће се побринути за креирање модела података, повезивање табела и сличне задатке.
Све ово би, пре свега, требало да обезбеди „демократизацију” података, тј. Свака особа може анализирати читав низ информација доступних компанији. Процес доношења одлука мора бити подржан методама статистичке анализе. Време приступа подацима треба да буде минимално, тако да нема потребе за писањем скрипти и СКЛ упита. И наравно, можете уштедети новац на високо плаћеним стручњацима за науку података.
Хипотетички, технологија нуди веома светле изгледе за пословање.
Шта замењује велике податке?
Али, у ствари, почео сам свој чланак са великим подацима. И не бих могао да развијем ову тему без кратког излета у савремене БИ алате, чија су основа често велики подаци. Судбина великих података је сада јасно одређена, а реч је о технологији у облаку. Фокусирао сам се на трансакције направљене са БИ добављачима како бих показао да сада сваки аналитички систем иза себе има складиште у облаку, а услуге у облаку имају БИ као предњи крај.
Не заборављајући на такве стубове у области база података као што су ОРАЦЛЕ и Мицрософт, потребно је напоменути њихов изабрани правац развоја пословања, а то је облак. Све понуђене услуге се могу пронаћи у облаку, али неке услуге у облаку више нису доступне на лицу места. Урадили су значајан посао на коришћењу модела машинског учења, креирали библиотеке доступне корисницима и конфигурисали интерфејсе за лакши рад са моделима од њиховог избора до подешавања времена почетка.
Још једна важна предност коришћења услуга у облаку, коју су изразили произвођачи, је доступност скоро неограничених скупова података о било којој теми за моделе обуке.
Међутим, поставља се питање: докле ће се клауд технологије укоренити код нас?
Извор: ввв.хабр.цом