Na 2013 afọ IBS, nke ahụ yiri ka ọ na-eke Nkewa Data, gwara m ka m mee ka ụbụrụ dị otú ahụ (naanị dabere na ahụmahụ nke mmekọrịta ya na ndị ahịa mmanụ na gas) gbasara mpaghara nsogbu nke Big Data, na Data n'ozuzu ya. Ya mere, ahụrụ m ya afọ 7 ka e mesịrị ma chee na ọ bụ ihe ọchị. Ụfọdụ ihe doro anya. Ụfọdụ tụgharịrị bụrụ eziokwu kpamkpam, mana ... afọ 7 agafeela.
M dere n'asụsụ Bekee ma ugbu a echere m ịsụgharị ya na Russian. Gịnị ma ọ bụrụ na ihe ka dị mkpa ugbu a? (M ga-asụgharị akwụkwọ akụkọ, ma hapụ ihe ịrịba ama na English site na umengwụ. Green dị mma, uhie dị ize ndụ, blue bụ nrọ).
Aga m ahazi okwu ole na ole sitere na "taa" Ịtalika o wee doo anya ma nwee ike ịmata ya.
Yabụ, DATA! Anyị nwere data...
Nkewa Data bụ Ngalaba Ọbara, n'ihi na enwere ike iji data tụnyere, dịka ọmụmaatụ, ọbara na-agafe na veins na akwara nke ahụ azụmahịa. Otú ọ dị, ọ bụ ezie na ọbara bụ otu ihe ahụ, ihe ndị dị ndụ dị iche iche ya mere mmepụta ihe siri ike, ma ọ na-anọchi anya ohere maka mmepe.
O nwere ndị data ahụ na-amaba n'anya ha ozugbo - ndị a bụ Anyị.
Na e nwere ndị, ọ dị mwute ikwu, na-adịghị ahụ data ebe oghere. Nke a, ọzọ, Ewoo, bụ nke anyị Ndị ahịa!
Ya mere, ụkpụrụ azụmahịa...
- Anyị na-ere azụmahịama ọ bụghị ИТ (nwere ike ndị ọkachamara IT niile gbaghara m ozugbo) n'ihi na anyị na-edozi nsogbu ụwa, yana, nke ọma, ego karịa.
- Nsogbu azụmaahịa niile gbadoro ụkwụ n'akụkụ ụlọ ọrụ thematic verticals na ọ ga-achọkwa nke ọma ọpụrụiche.
- Mgbalị igosi uru nke "data" ma ọ bụ, ọbụna ihe siri ike karị, uru nke "njikwa data" maka azụmahịa bụ nhụjuanya na mgbu ebighị ebi. N’ụzọ bụ́ isi, ọ dị ka ịbịakwute onye ahụ́ na-adị mma ma sị: “Nwoke, anyị ga-agwọ ọbara gị ugbu a, ma, nwoke, ọ dị oké ọnụ ahịa!”
- Nrọ m "mmiri mmiri" bụ ire "mwepụta data" na "nyocha" n'ime ụdị SaaS obere azụmaahịa na ọkaraonye rịgoro n'ime ọrụ igwe ojii 123 nwere oghere dị jụụ: njikwa oru ngo, helpdesk, ndekọ ego, CRM, ụgwọ ọrụ, ịkọ akụkọ oge, ahịa, ... ị kpọrọ ya aha, wee lie onwe ha na data ahụ. Youcalc na ndị ga-eme nke ọma (eleghị anya, ọ dịghị ọzọ) Nke a dị mma!
- Chọọ ndị na-amasị tinker "crunch" na data. Ha dị ụkọ na iju (dị ka akwụkwọ tii), mana isi ihe maka azụmahịa. Dịka ọmụmaatụ, onye na-ede uri nwere ike ịka mma na mmekọrịta.
- Ndị injinia mkpa! Achọrọ ịtụgharị nsogbu ndị Crunchers wetara na data ka ọ bụrụ ngwọta. Na ihe ịga nke ọma ma ọ bụ ọdịda nke mkpebi ahụ dabere kpamkpam na ha.
- Mmepe emeghe oru ngo bara uru nke ukwuu ma mee ka o kwe omume "ịchịkọta" ngwọta dị mgbagwoju anya site na ọkọ.
- Mana ... anyị agaghị echefu na Hadoop bụ ọbá akwụkwọ, Lucene bụkwa ọbá akwụkwọ, na ebe dị anya n'etiti ụlọ akwụkwọ na ngwaahịa mmepụta ihe ukwuu!
- A ga-edozi ihe ngwọta ndị e wuru na nke ọma, n'ihi na modularity и mwekota - isi ihe.
- Agile (Chineke gbaghara m) bụ isi usoro na mmekọrịta na ndị ahịa na nkwenye echiche, nke a ga-enwe ọtụtụ.
- Ọ ga-ekwe omume na ọ dị mkpa ịnyefe koodu nzuzo na UI niile. Ntụle azụmaahịa niile na nkọwapụta azụ azụ mkpa ịpụ n'ime ma were ya dị ka isi ikike.
- Ndị na-eme mkpebi azụmaahịa ga-enwerịrị “ịkọrọ” banyere ya mgbe niile mkpa na-arụ ọrụ nke ọma na data na-achọkwa ụzọ ọhụrụ iji nyochaa ha mgbe niile. Nchikota nke teknụzụ na ikike azụmahịa nke ndị ọrụ anyị ga-enyere aka ịkwalite ọkwa nke nzukọ dum n'ozuzu ya.
- internet - e nwere isi iyi nke mkpali na-adịghị agwụ agwụ (ọnweghị ọtụtụ nwamba ahụ n'oge ahụ) n'ihe gbasara ụzọ iji nweta njikwa data ụlọ ọrụ, ọ bụ ezie na ebumnobi na oke dị iche iche dị iche iche.
Ngosipụta teknụzụ...
- Enwere nnukwu ikike mmepe na mfe ka esi egosi ndị mmadụ data. Ị nwere ike ịkpọ nke a okwu "iPhonization".
- N'agbanyeghị eziokwu na ndị na-ere BI na-ekwu na ha bụ kpọmkwem weta nyocha na njedebe ndị ọrụ, (ma ha na-aga n'ihu na ntụziaka a) - ọganihu ahụ emebeghị. Ndị mmadụ anaghị aghọta nke ọma multidimensional data.
- Ihe nrụpụta onye ọrụ na-anọchi anya ọtụtụ ma ọ bụ dị mgbagwoju anya, data ahaziri nke ọma na ihu ụdị - na-egosikwa nsogbu na-adịghị agwụ agwụ. Nkwubi okwu: nke ọma ka mma.
- Ikpo okwu wuru na ndabere nke ntinye data na-akpaghị aka site na isi mmalite (nke a na-emepụtaghị mgbe niile maka mmịpụta dị otú ahụ) na-adabere na isi mmalite, nkwụsi ike nke njikọ, na akụrụngwa. A ga-ata usoro ikpo okwu (onye ozi) ụta mgbe niile maka ị nwetaghị nsonaazụ. Nkwenye - isi obodo nke ụdị nyiwe a. Isi obodo siri ike ịkpata ma dị mfe ida.
- Site na echiche azụmahịa, ọ dịghị ihe dị iche n'etiti Big Data analysis na Naanị Data. Ọtụtụ mgbe n'azụ ọnụọgụ dị mfe dị ka 2x2 na-agha ụgha ọtụtụ nde dollar ohere. Ezigbo ihe atụ bụ data na njedebe nke ndụ nke ihe akụrụngwa na shelf Norwegian. Kedu mgbe bụ ụbọchị niile maka mkpuchi n'ọdịnihu? A na-etinye nrụzi nke ngwá ọrụ niile n'otu axis wee chọpụta na n'ime afọ N, Shelf Amagedọn na-abịa - otu nwoke bara ọgaranya si n'oche ya bilie ngwa ngwa kpọọrọ okwu ndị a: "Ndo, adịghị m. nwere oge buru ibu, achọrọ m ịkwadebe ụgbọ mmiri ahụ…. ”
- Excel, na n'ụzọ bụ isi ngosipụta data nke data doro anya na nkenke, nwere nnukwu ike na ọdịnihu dị ukwuu. Ekwenyere m na tebụl mara mma (ma ka na-eme) na ọ bụ ya!
- Isi ụta nke "nyocha" a niile bụ mkpebi akpaaka. Enwere ohere kachasị ukwuu, kamakwa ihe egwu kachasị elu, ya mere ohere ndị ahụ ji baa ọgaranya, ya mere enwere ihe ize ndụ, ya mere enwere ohere, ọ bụ ya mere ha ji bụrụ toffee ... 🙂 Nlekọta nchịkwa nke ọma, dịka ọmụmaatụ ...
- Ọ bụrụ na "mmekọrịta" bụ isi ihe, mgbe ahụ, a ga-ewepụta data ahụ dị ka ọrụ. REST iwu, ma anyị agaghị echefu banyere njikarịcha arụpụtaghị ihe, nke a na-achụkarị àjà ugbu a maka njikọta ka ike kọmputa na-aga n'ihu na-eto eto.
- Data nna ukwu - nke a bụ ihe ekwesịrị ka edepụta ya, wepụta ya, hazie ya tupu ekwuo okwu azụmahịa ọ bụla. Data Master dị ntakịrị, mana nsogbu dị na ya dị ukwuu! Dị ka ụmụnna ndị semantics si kwuo, 50% nke nsogbu ụwa niile bụ n'ihi na ndị mmadụ na-akpọ otu ihe n'aha dị iche iche, na 50% nke ọzọ bụ n'ihi na ha na-akpọ ihe dị iche iche n'otu aha.
- Ọ bụla encapsulation na ọkwa nchekwa, ọ na-egbochi oghere nke ngwọta na-eduga na SILO-fication. Ọ dị mma ma ọ bụrụ na ị bụ nnukwu onye na-ere ahịa, ma ọ bụghị ya, ọ dị otú ahụ. (N'ebe a, anyị na-ekwu okwu, n'ezie, ọ bụghị maka ọkwa ngọngọ ma ọ bụghị banyere AWS S3, nke dịlarị 6 afọ mgbe ahụ, ma banyere faịlụ.).
- Nlereanya mmekọrịta data abụghịzi enyi anyị. RDF na isi-uru - dị mma! Anyị ahụla mgbanwe anwansi nke ọdụ data mmekọrịta nwere ụdị nke tebụl 2000 n'ime tebụl iri na ise, ọ nweghịkwa onye ọrụ tụfuru ihe ọ bụla.
- Ịntanetị na-arụ ọrụ n'ihi na ọ dị URL dị ka usoro ejikọtara ọnụ. Mkpa URL ma ọ bụ kama URI maka ụlọ ọrụ ozi akụrụngwa siri ike gabiga ókè.
- Ngwuputa ederede na NLP na-ewu ewu. Na ịntanetị. Mana ọbụlagodi na ngalaba ụlọ ọrụ, enwere ike nweta nnukwu ihe ịga nke ọma site na iwepụta data ahaziri ahazi site na data ụlọ ọrụ na-edoghị anya.
- Mmekọrịta n'etiti data ahaziri ahazi na ozi ewepụtara site na data enweghị nhazi, ya bụ. faịlụ - Klondike nyocha.
- Mgbe ị na-ewepụ data, echefula gbasara ikike na nwebiisinka.
- Ụlọ ọrụ na-ewepụta data ga-etolite angalaba hackers, n'ezi echiche nke okwu. Site na agha mgbago elu megide sistemu nchekwa bot crawler nke Yellow Pages.
- Tupu ịrụ ọrụ na data, ọ dị mkpa "hụ" n'ozuzu ya. O siri ike ịkọwa. Ụdị tabular na-abata n'uche. Maka ụfọdụ, ihe ngosi eserese, mana eserese ọ bụla abụrụla nkọwa. Otu ụzọ ma ọ bụ ọzọ ... "hụ"!
- Na-ekwughachi okwu nke onye ọrụ "tụkwasị obi" na frontend. Tụkwasa obi na usoro njikọ / usoro mmepụta data, ntụkwasị obi na data, tụkwasị obi ná mkpebi ndị e mere.
isi: www.habr.com
