2013 yil IBS, keyin yaratilayotgandek tuyuldi Ma'lumotlar bo'limi, mendan Katta ma'lumotlar va umuman ma'lumotlarning muammoli sohasi bo'yicha (faqat neft va gaz korporativ mijozlari bilan o'zaro hamkorlik tajribasiga asoslangan) shunday aql bovar qilmasimni so'radi. Shunday qilib, men uni 7 yildan keyin uchratdim va buni kulgili deb o'yladim. Ba'zi narsalar aniq. Ba'zilar butunlay to'g'ri emas edi, lekin ... 7 yil o'tdi.
Ingliz tilida yozdim, endi rus tiliga tarjima qilishni o'yladim. Agar biror narsa hozir ham dolzarb bo'lsa-chi? (Men byulletenlarni tarjima qilaman, lekin dangasalikdan ingliz tilidagi belgilarni qoldiring. Yashil - yaxshi, qizil - xavfli, ko'k - tush).
Men "bugun" dan minimal izohlarni rasmiylashtiraman italyanchaShunday qilib, u aniq va ajralib turadi.
Shunday qilib, DATA! Biz uchun maΚΌlumotlar...
Ma'lumotlar bo'limi qon bo'limidir, chunki ma'lumotlarni, masalan, biznes organining tomirlari va arteriyalari orqali o'tadigan qon bilan solishtirish mumkin. Biroq, qon bir xil bo'lsa-da, organizmlar boshqacha va shuning uchun ishlab chiqarish juda qiyin, lekin u ham rivojlanish imkoniyatini ifodalaydi.
Ma'lumotlar ularning ko'zlariga tushadigan odamlar bor - bular Biz shundaymiz.
Va afsuski, ma'lumotlar nuqtasini bo'sh ko'rmaydigan odamlar bor. Bu yana, afsuski, bizniki Xaridorlar!
Va shunday qilib, biznes tamoyillari ...
- Sotish biznes, va emas IT (barcha IT-mutaxassislari meni birdan kechirsinlar), chunki biz dunyo muammolarini hal qilmoqdamiz va yaxshi, ko'proq pul.
- Barcha biznes muammolari tematik sanoat vertikallari atrofida to'plangan va etarli darajada talab qiladi mutaxassisliklar.
- Isbot qilishga urinishlar "ma'lumotlar" qiymati yoki undan ham qiyinroq, biznes uchun "ma'lumotlarni boshqarish" ning qiymati abadiy azob va azobdir. Umuman olganda, bu o'zini yaxshi his qilayotgan odamning oldiga kelib: "Do'stim, biz sizning qoningizni hozir davolaymiz, do'stim, bu qimmat!"
- Mening "ho'l orzuim" - SaaS modelida "ma'lumotlar olish" va "tahlil" ni sotish kichik va o'rta biznesKim ajoyib interfeyslarga ega 123 ta bulutli xizmatlarga kirgan: loyihalarni boshqarish, yordam stoli, buxgalteriya hisobi, CRM, ish haqi, vaqt hisoboti, marketing, ... siz aytasiz va ma'lumotlarga ko'milgan. Youcalc va Successfactors (ehtimol endi yo'q) bu yaxshi!
- Tinker qilishni yaxshi ko'radigan odamlarni qidiring "siqilish" ma'lumotlar bilan. Ular kamdan-kam va g'alati (choy barglari kabi), lekin biznes uchun kalit. Misol uchun, shoir o'zaro bog'lanishda juda yaxshi bo'lishi mumkin.
- Muhandislar kerak! Crunchers ma'lumotlardan tortib olgan muammolarni yechimlarga aylantirish uchun kerak. Va qarorning muvaffaqiyati yoki muvaffaqiyatsizligi butunlay ularga bog'liq.
- Rivojlanish OpenSource loyihalar katta ahamiyatga ega va murakkab echimlarni deyarli noldan "yig'ish" imkonini beradi.
- Lekin... unutmasligimiz kerakki, Hadoop kutubxona, Lucene ham kutubxona va orasidagi masofa kutubxona va sanoat mahsuloti ko'p!
- Qurilgan echimlarni sezilarli darajada moslashtirish kerak bo'ladi, chunki modullilik ΠΈ integratsiyalashuv - asosiy fikrlar.
- epchil (Xudo meni kechir) mijoz bilan o'zaro aloqada va tekshirishda asosiy texnikadir farazlar, ulardan ko'p bo'ladi.
- Ayniqsa, barcha kodlash va foydalanuvchi interfeysini autsorsing qilish mumkin va zarur. Barcha biznes tahlillari va spetsifikatsiyalar backend ketish kerak ichida va asosiy kompetensiya sifatida qaraladi.
- Biznes qarorlarini qabul qiluvchilar doimiy ravishda "xabardor bo'lishlari" kerak ma'lumotlar bilan to'g'ri ishlash zarurati va ularni tahlil qilishning yangi usullarini doimiy ravishda izlash. Xodimlarimizning texnik va biznes kompetensiyalarining uyg'unligi butun tashkilot maqomini oshirishga yordam beradi.
- Internet - cheksiz ilhom manbai (O'sha paytda mushuklar unchalik ko'p emas edi) maqsadlari va ko'lami sezilarli darajada farq qilsa-da, korxona ma'lumotlarini boshqarishga yondashuvlar bilan bog'liq.
Texnologik postulatlar...
- Rivojlanish salohiyati katta soddalashtirish ma'lumotlar odamlarga qanday ko'rsatiladi. Siz buni "iPhonization" so'zi deb atashingiz mumkin.
- BI sotuvchilari to'g'ridan-to'g'ri deb da'vo qilishlariga qaramay oxirgi foydalanuvchilarga tahliliy ma'lumotlarni keltiring, (va ular, albatta, bu yo'nalishda harakat qilmoqda) - yutuq hali sodir bo'lmadi. Odamlar shunchaki yaxshi tushunmaydilar ko'p o'lchovli ma'lumotlar.
- Ko'proq yoki kamroq murakkab, erkin tuzilgan ma'lumotlarni ifodalovchi foydalanuvchi interfeysi qirrali shakl - cheksiz ko'p muammolarni ham taqdim etadi. Xulosa: qanchalik xushomadgo'y bo'lsa, shuncha yaxshi.
- Manbalardan avtomatik ma'lumotlarni olish asosida qurilgan platforma (ular har doim ham bunday chiqarish uchun mo'ljallanmagan) manbalarga, ulagichlarning barqarorligiga va infratuzilmaga sezilarli darajada bog'liq. Platforma (messenjer) har doim natijalarni etkazmaslik uchun ayblanadi. Ishonch - bu turdagi platformalarning kapitali. Topish qiyin va yo'qotish oson bo'lgan kapital.
- Biznes nuqtai nazaridan, Big Data tahlili va o'rtasida hech qanday farq yo'q Faqat ma'lumotlar. Ko'pincha 2x2 kabi oddiy raqamlar ortida millionlab dollarlik imkoniyatlar yotadi. Yaxshi misol - Norvegiya shelfidagi infratuzilma elementlarining ishlash muddati tugashi haqidagi ma'lumotlar. Kelajakdagi barcha sanalar qachon. Barcha jihozlarni ta'mirlash bir o'qga qo'yildi va ular N yil ichida Armageddon tokchasi kelayotganini aniqladilar - bir juda badavlat odam stuldan turib, shoshib xonadan chiqib ketdi: "Kechirasiz, men buni qilmayman. Ko'p vaqtim bor, men flotni tayyorlashim kerak ... "
- Excel va mohiyatan ma'lumotlarning aniq va ixcham jadvalli taqdimoti juda katta kuch va buyuk kelajakka ega. Men chiroyli stollarga ishonaman (va hali ham) va shunday!
- Bu barcha "tahlil" ning asosiy kamonidir qarorlarni avtomatlashtirish. Eng katta imkoniyatlar bor, lekin eng yuqori risklar ham bor, shuning uchun imkoniyatlar boy, shuning uchun xavf bor, shuning uchun imkoniyatlar bor, shuning uchun ular kofe... π Quduqni burg'ulash boshqaruvi, masalan...
- Agar "integratsiya" asosiy xususiyat bo'lsa, u holda ma'lumotlar de-fakto xizmat sifatida taqdim etilishi kerak. REST qoidalar, lekin biz optimallashtirish haqida unutmasligimiz kerak hosildorlik, bu endi tez-tez integratsiyalashuv uchun qurbon qilinadi, chunki hisoblash quvvati o'sishda davom etmoqda.
- Asosiy ma'lumotlar - bu har qanday biznes masalalarini hal qilishdan oldin mahalliylashtirish, qazib olish, standartlashtirish kerak bo'lgan narsa. Asosiy ma'lumotlar kichik, lekin u bilan bog'liq muammolar katta! Semantika aka-ukalari aytganidek, dunyodagi barcha muammolarning 50% odamlar bir xil narsalarni turli nomlar bilan atashgani uchun, qolgan 50% esa turli narsalarni bir xil nom bilan ataganligi sabablidir.
- Har qanday inkapsulyatsiya saqlash darajasida, u yechimning ochiqligini cheklaydi va SILO-fikatsiyaga olib keladi. Agar siz katta sotuvchi bo'lsangiz yaxshi bo'ladi, aks holda bu shunday. (Bu erda, albatta, blok darajasi haqida emas, balki o'sha paytda allaqachon 3 yoshda bo'lgan AWS S6 haqida emas, balki fayllar haqida.).
- Relyatsion modellashtirish ma'lumotlar endi bizning do'stimiz emas. RDF va kalit-qiymat - ajoyib! Biz 2000 ta jadval modellari bilan relyatsion ma'lumotlar bazalarining 15 ta jadvalga sehrli o'zgarishini ko'rdik va foydalanuvchilarning hech biri hech narsani yo'qotmadi.
- Internet mavjud bo'lgani uchun ishlaydi URL murojaat qilishning yagona usuli sifatida. URL ning ahamiyati yoki aniqrog'i URI korxona uchun axborot resurslarini ortiqcha baholash qiyin.
- Matn qazib olish va NLP mashhur. Internetda. Ammo korporativ sektorda ham tuzilmagan korporativ ma'lumotlardan tuzilgan ma'lumotlarni olish orqali katta muvaffaqiyatlarga erishish mumkin.
- Sinergiya tuzilgan ma'lumotlar va tuzilmagan ma'lumotlardan olingan ma'lumotlar o'rtasida, ya'ni. fayllar - analitik Klondike.
- Ma'lumotlarni olishda huquqlar haqida unutmang mualliflik huquqlari.
- Ma'lumot olish kompaniyasi a yaratishi kerakxakerlar bo'limi, so'zning yaxshi ma'nosida. Yellow Pages brauzer botlarini himoya qilish tizimlariga qarshi kurashdan ilhomlangan.
- Ma'lumotlar bilan ishlashdan oldin buni qilish kerak "ko'rish" butunligicha. Buni tushuntirish qiyin. Yodga jadval shakllari keladi. Ba'zilar uchun grafik tasvirlar, lekin har qanday grafik allaqachon talqindir. Bir yo'l yoki boshqa ... "ko'rish"!
- Frontendda foydalanuvchining "ishonch" masalasini takrorlash. Ulagichlarga/ma'lumotlarni yaratish jarayonlariga ishonish, ma'lumotlarga ishonish, qabul qilingan qarorlarga ishonish.
Manba: www.habr.com