Дата Дивисион. године 2013. Ретроспектива

У КСНУМКС године ИБС, који је тада као да је стварао Дата Дивисион, замолио ме да направим такав браиндумп (искључиво на основу искуства у интеракцији са корпоративним купцима нафте и гаса) у вези са проблемском области великих података и података уопште. Тако да сам наишао 7 година касније и помислио да је смешно. Неке ствари су очигледне. Неки су се испоставили да нису сасвим тачни, али... Прошло је 7 година.

Писао сам на енглеском и сад сам размишљао да то преведем на руски. Шта ако је нешто и сада актуелно? (Ја ћу превести билтене, али оставите натписе на енглеском из лењости. Зелено је добро, црвено је опасно, плаво је сан).

Озваничићу минималне коментаре од „данас“ Италијантако да је јасан и препознатљив.

Дакле, ПОДАЦИ! Подаци за нас...

Одељење за податке је Одељење за крв, јер се подаци могу упоредити, на пример, са крвљу која тече кроз вене и артерије пословног тела. Међутим, иако је крв иста, организми су различити и самим тим продукција веома тешко, али представља и прилику за развој.

Има људи којима подаци скачу право у очи - то су Ми.
А има и људи који, нажалост, не виде податке празно. Ово је, опет, авај, наше Купци!

Дакле, пословни принципи...

1. Ми продајемо посаоИ не ТО (нека ми сви ИТ стручњаци опросте одједном) јер решавамо светске проблеме и, ето, више новца.
2. Сви пословни проблеми су концентрисани око тематских индустријских вертикала и захтеваће адекватне специјализације.
3. Покушаји доказивања вредност "података" или, што је још теже, вредност „управљања подацима“ за посао је вечна патња и бол. У суштини, то је као да дођете особи која се осећа добро и кажете: „Човече, сада ћемо да ти лечимо крв, а друже, то је скупо!“
4. Мој „мокри сан“ је да продам „вађење података“ и „аналитику“ у оквиру СааС модела мала и средња предузећакоји су се попели на 123 клауд сервиса са кул интерфејсима: управљање пројектима, служба за помоћ, рачуноводство, ЦРМ, обрачун зарада, извештавање о времену, маркетинг, ... такорећи, и закопали се у податке. Иоуцалц и Суццессфацторс (вероватно их више нема) Ово је добро!
5. Потражите људе који воле да петљају "крцкање" са подацима. Они су ретки и чудни (као листови чаја), али кључни за посао. Песник, на пример, може бити веома добар у корелацији.
6. Инжењери потребно! Потребно је да се проблеми које је Црунцхерс извукао из података претвори у решења. А успех или неуспех одлуке у потпуности зависи од њих.
7. Развој опенсоурце пројекти су од велике вредности и омогућавају „састављање“ комплексних решења практично од нуле.
8. Али... не смемо заборавити да је Хадооп библиотека, а Луцене је такође библиотека, и удаљеност између њих библиотека и индустријски производ много!
9. Изграђена решења ће морати значајно да се адаптирају, јер модуларност и интеграбилност - Кључне тачке.
10. агилан (Боже опрости ми) је кључна техника у интеракцији са купцем и верификацији хипотезе, којих ће бити много.
11. Нарочито је могуће и неопходно да се сво кодирање и корисничко сучеље пренесу на спољне сараднике. Сва пословна аналитика и спецификације бацкенд треба да оде унутар и сматра се кључном компетенцијом.
12. Доносиоци пословних одлука морају бити стално „информисани“. потреба за правилним радом са подацима и стално трагајући за новим начинима за њихову анализу. Комбинација техничких и пословних компетенција наших запослених допринеће подизању статуса целе организације у целини.
13. Интернет – постоји бескрајан извор инспирације (тада није било толико мачака) у односу на приступе управљању подацима предузећа, иако се циљеви и обим значајно разликују.

Технолошки постулати...

1. Постоји огроман развојни потенцијал у упрошћавање како се подаци приказују људима. Ово можете назвати речју „иПхонизација“.
2. Упркос чињеници да БИ продавци тврде да су директно донесите аналитику до крајњих корисника, (а они се сигурно крећу у овом правцу) - до продора још није дошло. Људи једноставно не разумеју добро вишедимензионални подаци.
3. Кориснички интерфејс који представља мање или више сложене, лабаво структуриране податке фасетирани форма – такође представља бесконачан број проблема. Закључак: што равније то боље.
4. Платформа изграђена на основу аутоматског издвајања података из извора (који нису увек дизајнирани за такво извлачење) значајно зависи од извора, стабилности конектора и инфраструктуре. Платформа (мессенгер) ће увек бити окривљена за неуспех у испоруци резултата. Самопоуздање – капитал ове врсте платформи. Капитал који је тешко зарадити и лако изгубити.
5. Са пословне тачке гледишта, нема разлике између анализе великих података и Само подаци. Често иза једноставних бројева као 2к2 крију се милионе долара вредне могућности. Добар пример су подаци о престанку животног века инфраструктурних елемената на норвешком шелфу. Када су сви датуми будућих капи. поправке све опреме су стављене на једну осовину и сазнали су да за Н година долази полица Армагедон - један веома имућан човек је устао са столице и журно се наклонио из собе са речима: „Извините, нећу имам много времена, морам да припремим флоту...”
6. Екцел, а у суштини јасан и концизан табеларни приказ података, има огромну моћ и велику будућност. Верујем у лепе столове (и још) и то је то!
7. Главни лук све ове „аналитике“ је аутоматизација одлучивања. Постоје највеће могућности, али и највећи ризици, зато су могућности богате, зато постоје ризици, зато постоје могућности, зато су карамела... 🙂 Па управљање бушењем, на пример...
8. Ако је „интеграбилност“ кључна карактеристика, онда би подаци де фацто требали бити представљени као услуга. ОДМОР правила, али не смемо заборавити на оптимизацију продуктивност, који се сада често жртвује ради интеграбилности како рачунарска снага наставља да расте.
9. Основни подаци - то је оно што треба локализовати, издвојити, стандардизовати пре него што се позабавимо било каквим пословним питањима. Главни подаци су мали, али проблеми са њима су велики! Како кажу браћа семантичари, 50% свих светских проблема је зато што људи исте ствари зову различитим именима, а осталих 50% зато што различите ствари зову истим именом.
10. било који инкапсулација на нивоу складиштења ограничава отвореност решења и доводи до СИЛО-фикације. Добро је ако сте велики продавац, иначе је тако-тако. (Овде говоримо, наравно, не о нивоу блока и не о АВС С3, који је тада већ имао 6 година, већ о фајловима).
11. Релационо моделирање подаци више нису наш пријатељ. РДФ и кључ/вредност – супер! Видели смо магичне трансформације релационих база података са моделима од 2000 табела у 15 табела, а нико од корисника није изгубио ништа.
12. Интернет функционише јер постоји УРЛ адреса као јединствени метод обраћања. Важност УРЛ-а или боље речено УРИ за информационе ресурсе предузећа је тешко преценити.
13. Ископавање текста и НЛП су популарни. На Интернету. Али чак иу корпоративном сектору, велики успех се може постићи издвајањем структурираних података из неструктурираних корпоративних података.
14. Синергија између структурираних података и информација издвојених из неструктурираних података, тј. датотеке – аналитички Клондајк.
15. Када извлачите податке, не заборавите на права и ауторска права.
16. Компанија за екстракцију података мора да формира аодељење за хакере, у добром смислу те речи. Инспирисан тешком борбом против система заштите од робота за индексирање Иеллов Пагес.
17. Пре рада са подацима потребно је "види" у целости. Тешко је објаснити. Падају ми на памет табеларни облици. За неке, графички прикази, али сваки графикон је већ интерпретација. Овако или онако... „видите“!
18. Понављање питања „поверења“ корисника у фронтенд. Поверење у конекторе/процесе генерисања података, поверење у податке, поверење у донете одлуке.

Извор: ввв.хабр.цом