Nan 2013 ane Livr, ki Lè sa a, te sanble yo dwe kreye Divizyon Done, mande m 'fè tankou yon braindump (sèlman ki baze sou eksperyans nan entèraksyon ak konpayi lwil oliv ak gaz kliyan) konsènan zòn nan pwoblèm nan Big Data, ak Done an jeneral. Se konsa, mwen te vin atravè li 7 ane pita epi li te panse li te komik. Gen kèk bagay ki evidan. Gen kèk ki te vin pa totalman vre, men... 7 ane pase.
Mwen te ekri nan lang angle e kounye a, mwen te panse a tradui li nan Ris. E si yon bagay toujou enpòtan kounye a? (Mwen pral tradui bilten yo, men kite siy yo an angle pou parès. Vèt la bon, wouj la danjere, ble se yon rèv).
Mwen pral fòmalize kòmantè minim yo soti nan "jodi a" Italyenpou ke li klè ak distenge.
Se konsa, done! Done pou nou...
Divizyon Done a se Divizyon San an, paske done yo ka konpare, pa egzanp, ak san an k ap pase nan venn ak atè yon kò biznis. Sepandan, byenke san an se menm bagay la, òganis yo diferan ak Se poutèt sa pwodwiizasyon trè difisil, men li reprezante tou yon opòtinite pou devlopman.
Gen moun pou ki done yo sote dwat nan je yo - sa yo se Nou.
Epi gen moun ki, malerezman, pa wè done yo pwen vid. Sa a, ankò, Ay, se nou Kliyan yo!
Se konsa, prensip biznis...
- Nou vann biznismen se pa IT (Se pou tout espesyalis IT padonnen m 'nan yon fwa) paske nou ap rezoud pwoblèm nan mond lan, epi, byen, plis lajan.
- Tout pwoblèm biznis yo konsantre alantou vètikal endistri tematik epi yo pral mande pou adekwat espesyalizasyon.
- Eseye pou pwouve valè "done" oswa, menm pi difisil, valè "jesyon done" nan yon biznis se soufrans etènèl ak doulè. Fondamantalman, se tankou w vin jwenn yon moun ki santi l byen epi li di: "Mezi, nou pral trete san ou kounye a, epi, mesye, li chè!"
- "Rèv mouye" mwen an se vann "ekstraksyon done" ak "analitik" nan modèl SaaS la ti ak mwayen bizniski te monte nan 123 sèvis nwaj ak koòdone fre: jesyon pwojè, biwo èd, kontablite, CRM, pewòl, rapò tan, maketing, ... ou non li, epi antere tèt yo nan done yo. Youcalc ak Successfactors (pwobableman pa genyen ankò) Sa bon!
- Chèche moun ki renmen brikoleur "crunch" ak done. Yo ra ak etranj (tankou fèy te), men kle nan biznis. Yon powèt, pou egzanp, ka trè bon nan korelasyon.
- Enjenyè bezwen! Bezwen tounen pwoblèm ke Crunchers rale soti nan done nan solisyon. Ak siksè oswa echèk nan desizyon an depann antyèman sou yo.
- Devlopman opansours pwojè yo gen anpil valè epi li fè li posib pou "rasanble" solisyon konplèks pratikman nan grate.
- Men... nou pa dwe bliye ke Hadoop se yon bibliyotèk, ak Lucene se yon bibliyotèk tou, ak distans ki genyen ant bibliyotèk ak pwodwi endistriyèl anpil!
- Solisyon yo bati pral gen yo dwe siyifikativman adapte, paske modilarite и entegrabilite - pwen kle yo.
- ajil (Bondye padone m) se yon teknik kle nan entèraksyon ak kliyan an ak verifikasyon ipotèz, ki pral gen anpil.
- Li espesyalman posib epi li nesesè pou konfye tout kodaj ak UI. Tout analiz biznis ak espesifikasyon backend bezwen kite andedan epi konsidere kòm yon konpetans debaz.
- Moun k ap pran desizyon biznis yo dwe toujou ap "enfòme" sou nesesite pou byen travay ak done ak toujou ap chèche nouvo fason pou analize yo. Konbinezon teknik ak konpetans biznis nan anplwaye nou yo ap ede ogmante estati òganizasyon an antye kòm yon antye.
- Entènèt la - gen yon sous enspirasyon kontinuèl (pa t gen anpil chat lè sa a) an relasyon ak apwòch nan jesyon done antrepriz, byenke objektif yo ak dimansyon yo varye anpil.
Postula teknolojik...
- Gen yon gwo potansyèl devlopman nan senplifikasyon ki jan done yo montre moun yo. Ou ka rele sa mo "iPhonization".
- Malgre lefèt ke fournisseurs BI reklame ke yo dirèkteman pote analiz bay itilizatè final yo, (epi yo sètènman deplase nan direksyon sa a) - zouti a poko fèt. Moun jis pa konprann byen miltidimansyonèl done.
- Yon koòdone itilizatè ki reprezante done plis oswa mwens konplèks, ki pa gen anpil estrikti fasèt fòm - tou prezante yon kantite kontinuèl nan pwoblèm. Konklizyon: plat la pi bon an.
- Yon platfòm ki bati sou baz ekstraksyon done otomatik ki soti nan sous (ki pa toujou fèt pou fè ekstraksyon sa yo) depann anpil sou sous yo, estabilite konektè yo ak enfrastrikti a. Platfòm nan (mesajè) ap toujou blame pou echèk yo bay rezilta yo. Trust – kapital sa a kalite platfòm. Kapital ki difisil pou touche ak fasil pou pèdi.
- Soti nan yon pwen de vi biznis, pa gen okenn diferans ant analiz Big Data ak Jis Done. Souvan dèyè nimewo senp tankou 2x2 manti dè milyon de dola yon valè de opòtinite. Yon bon egzanp se done sou fen lavi eleman enfrastrikti sou etajè Nòvejyen an. Kilè yo tout dat kap vini yo. reparasyon nan tout ekipman yo te mete sou yon sèl aks epi yo te dekouvri ke nan N ane etajè Armagedon an t ap vini - yon nonm trè rich te leve soti nan chèz li epi prese bese soti nan chanm nan ak pawòl sa yo: "Padon, mwen pa fè sa. gen anpil tan, mwen bezwen prepare flòt la..."
- Excel, ak esansyèlman yon prezantasyon tabular klè ak kout nan done, gen gwo pouvwa ak yon gwo avni. Mwen kwè nan bèl tab (epi toujou fè) e sa se li!
- Banza prensipal la nan tout "analytics" sa a se automatisation desizyon. Gen pi gwo opòtinite, men tou pi gwo risk, se pou sa opòtinite yo rich, se pou sa gen risk, se pou sa gen opòtinite, se pou sa yo se toffee... 🙂 Jesyon byen perçage, pa egzanp...
- Si "entegrabilite" se yon karakteristik kle, Lè sa a, done yo ta dwe defakto prezante kòm yon sèvis. REST règ, men nou pa dwe bliye sou optimize pwodiktivite, ki kounye a souvan sakrifye pou entegrabilite kòm pouvwa informatique kontinye ap grandi.
- Done mèt - sa a se sa ki bezwen lokalize, ekstrè, estanda anvan adrese nenpòt pwoblèm biznis. Done mèt yo piti, men pwoblèm ak li yo gwo! Jan frè semantik yo di, 50% nan tout pwoblèm nan mond lan se paske moun yo rele menm bagay yo ak non diferan, ak lòt 50% yo se paske yo rele bagay diferan ak menm non.
- Nenpòt enkapsulasyon nan nivo depo, li limite ouvèti a nan solisyon an ak mennen nan SILO-fication. Li bon si ou se yon machann gwo, otreman li nan konsa-konsa. (Isit la nou ap pale, nan kou, pa sou nivo a blòk epi yo pa sou AWS S3, ki te deja 6 ane fin vye granmoun lè sa a, men sou dosye.).
- Modèl relasyon done pa zanmi nou ankò. RDF ak kle-valè - fre! Nou te wè transfòmasyon majik nan baz done relasyon ak modèl 2000 tab nan 15 tab, epi youn nan itilizatè yo pa pèdi anyen.
- Entènèt la ap travay paske li egziste URL kòm yon metòd inifye pou adrese. Enpòtans URL ou pito URI pou resous enfòmasyon antrepwiz difisil pou surestimer.
- Tèks min ak NLP yo popilè. Nan entènèt la. Men, menm nan sektè antrepriz la, gwo siksè ka reyalize lè w ekstrè done estriktire ki soti nan done antrepriz ki pa estriktire.
- Sinèrji ant done estriktire ak enfòmasyon ki sòti nan done ki pa estriktire, i.e. dosye – analyse Klondike.
- Lè ekstrè done, pa bliye sou dwa ak dwadotè.
- Konpayi ekstraksyon done a dwe fòme yondepatman entru yo, nan bon sans mo a. Enspire pa batay difisil kont sistèm pwoteksyon bot krole Paj Jòn yo.
- Anvan w travay ak done, li nesesè "wè" an antye li. Li difisil pou eksplike. Fòm tabul yo vin nan tèt ou. Pou kèk moun, reprezantasyon grafik, men nenpòt graf se deja yon entèpretasyon. Yon fason oswa yon lòt... "wè"!
- Repete pwoblèm itilizatè "konfyans" nan entèfas la. Mete konfyans nan konektè/pwosesis jenerasyon done, konfyans nan done, konfyans nan desizyon yo pran.
Sous: www.habr.com