Tamin'ny taona 2008, teny vaovao sy fironana lamaody ny BigData. Amin'ny taona 2019, ny BigData dia zavatra amidy, loharanom-bola ary anton'ny faktiora vaovao.
Tamin'ny fararano lasa teo, nanangana volavolan-dalàna mifehy ny angon-drakitra lehibe ny governemanta Rosiana. Mety tsy ho fantatra amin'ny fampahalalam-baovao ny olona tsirairay, fa afaka manao izany noho ny fangatahan'ny manampahefana federaly. Ny fanodinana BigData ho an'ny antoko fahatelo dia aorian'ny fampahafantarana ny Roskomnadzor. Ireo orinasa manana adiresy tambajotra maherin'ny 100 dia tafiditra ao anatin'ny lalàna. Ary, mazava ho azy, raha tsy misy rejisitra - dia tokony hamorona iray miaraka amin'ny lisitry ny mpandraharaha angon-drakitra. Ary raha toa ka tsy noraisin'ny rehetra ho zava-dehibe io Big Data io, dia izao no tsy maintsy raisina.
Izaho, amin'ny maha-talen'ny orinasa mpamorona faktiora izay mikarakara an'ity data lehibe ity, dia tsy afaka miraharaha ny angon-drakitra. Hieritreritra momba ny angon-drakitra lehibe aho amin'ny alàlan'ny prisma an'ny mpandraharahan'ny fifandraisan-davitra, amin'ny alàlan'ny rafitra faktiora mikoriana fampahalalana momba ny mpanjifa an'arivony mandalo isan'andro.
Theorem
Andeha isika hanomboka, toy ny amin'ny olana matematika: voalohany dia manaporofo fa ny angon-drakitra momba ny telecom dia azo antsoina hoe BigDat. Amin'ny ankapobeny, ny angon-drakitra lehibe dia miavaka amin'ny toetra telo VVV, na dia amin'ny fandikana maimaim-poana aza dia nahatratra fito ny isan'ny "Vs".
Boky. Ny MVNO an'ny Rostelecom irery dia manompo mpanjifa maherin'ny iray tapitrisa. Ireo mpandraharaha mpampiantrano fototra dia mitantana angon-drakitra ho an'ny olona 44 ka hatramin'ny 78 tapitrisa. Mitombo isan-tsegondra ny fifamoivoizana: amin'ny telovolana voalohany amin'ny 2019, efa nahazo 3,3 miliara GB avy amin'ny finday ny mpanjifa.
Hafainganam-pandeha. Tsy misy afaka milaza aminao momba ny dinamika tsara kokoa noho ny antontan'isa, noho izany dia handeha hamaky ny vinavinan'ny Cisco aho. Amin'ny 2021, ny 20% amin'ny fifamoivoizana IP dia handeha amin'ny fifamoivoizana finday - efa ho avo telo heny izany ao anatin'ny dimy taona. Ny ampahatelon'ny fifandraisana finday dia ny M2M - ny fampivoarana ny IoT dia hitarika amin'ny fitomboan'ny fifandraisana enina heny. Ny Internet of Things dia tsy ho lasa tombony fotsiny, fa koa loharanon-karena, ka ny mpandraharaha sasany dia tsy hifantoka amin'izany fotsiny. Ary ireo izay mampivelatra ny IoT ho serivisy misaraka dia hahazo fifamoivoizana avo roa heny.
Variety. Ny fahasamihafàna dia foto-kevitra mifototra, fa ny mpandraharahan'ny fifandraisan-davitra dia tena mahafantatra ny zava-drehetra momba ny mpanjifany. Avy amin'ny antsipirian'ny anarana sy pasipaoro ka hatramin'ny maodely finday, fividianana, toerana notsidihina ary mahaliana. Araka ny lalàna Yarovaya, voatahiry mandritra ny enim-bolana ny rakitra media. Andeha àry horaisina ho toy ny axiom fa miovaova ny angon-drakitra voaangona.
Software sy fomba fiasa
Ny mpamatsy dia iray amin'ireo mpanjifa lehibe amin'ny BigData, ka ny ankamaroan'ny teknika famakafakana data lehibe dia azo ampiharina amin'ny indostrian'ny fifandraisan-davitra. Fanontaniana iray hafa dia hoe iza no vonona hampiasa vola amin'ny fampandrosoana ny ML, AI, Deep Learning, mampiasa vola amin'ny foibe data sy fitrandrahana data. Ny asa feno miaraka amin'ny angon-drakitra dia misy fotodrafitrasa sy ekipa iray, ny fandaniana izay tsy zakan'ny rehetra. Ny orinasa efa manana trano fanatobiana orinasa na mamolavola fomba fitantanana data dia tokony hiloka amin'ny BigData. Ho an'ireo izay tsy mbola vonona amin'ny fampiasam-bola maharitra, manoro hevitra anao aho mba hanangana tsikelikely ny maritrano rindrambaiko ary hametraka singa tsirairay. Azonao atao ny miala amin'ny maody mavesatra sy Hadoop farany. Vitsy ny olona mividy vahaolana efa vita ho an'ny olana toy ny Data Quality sy Data Mining; ny orinasa amin'ny ankapobeny dia manamboatra ny rafitra amin'ny fepetra manokana sy ny filany - ny tenany na miaraka amin'ny fanampian'ny mpamorona.
Saingy tsy ny faktiora rehetra no azo ovaina mba hiasa amin'ny BigData. Na ny marimarina kokoa, tsy ny zava-drehetra ihany no azo ovaina. Vitsy ny olona afaka manao izany.
Famantarana telo fa ny rafitra faktiora dia manana fahafahana ho lasa fitaovana fanodinana angona:
- scalability marindrano. Ny logiciel dia tsy maintsy miovaova - angona lehibe no resahina. Ny fitomboan'ny fampahalalam-baovao dia tokony hokarakaraina amin'ny fitomboan'ny fitaovana amin'ny cluster.
- Fandeferana fahadisoana. Ny rafitra voaloa mialoha dia mazàna mandefitra amin'ny lesoka amin'ny alàlan'ny default: ny faktiora dia apetraka ao anaty cluster amin'ny geolocation maromaro mba hifampiantohana ho azy ireo. Tokony ho ampy ihany koa ny solosaina ao amin'ny kluster Hadoop raha toa ka tsy mahomby ny iray na maromaro.
- Toerana. Ny angon-drakitra dia tsy maintsy tehirizina sy karakaraina amin'ny mpizara iray, raha tsy izany dia mety ho tapaka ianao amin'ny famindrana angon-drakitra. Iray amin'ireo tetika fomba fiasa Map-Reduce malaza: fivarotana HDFS, fizotran'ny Spark. Ny tsara indrindra, ny rindrambaiko dia tokony hampiditra tsy misy olana amin'ny fotodrafitrasa foibe data ary afaka manao zavatra telo ao anatin'ny iray: manangona, mandamina ary manadihady vaovao.
ekipa
Inona, ahoana ary inona no tanjon'ny programa hikarakarana angon-drakitra lehibe dia tapa-kevitra ny ekipa. Matetika dia misy olona iray - mpahay siansa momba ny data. Na izany aza, raha ny hevitro, ny fonosana ambany indrindra amin'ny mpiasa ho an'ny Big Data dia misy ihany koa Mpitantana vokatra, Injeniera Data ary Mpitantana. Ny voalohany dia mahatakatra ny serivisy, mandika ny fiteny teknika amin'ny fitenin'olombelona ary ny mifamadika amin'izany. Data Engineer dia mamelona modely amin'ny fampiasana Java/Scala ary andrana amin'ny Machine Learning. Ny mpitantana dia mandrindra, mametraka tanjona ary mifehy ny dingana.
olana
Ao amin'ny ekipan'ny BigData no matetika misy olana rehefa manangona sy manodina angona. Ny programa dia mila manazava ny zavatra tokony ho angonina sy ny fomba fikarakarana azy - mba hanazavana izany dia mila mahatakatra izany aloha ianao. Saingy ho an'ny mpamatsy, tsy dia tsotra ny zavatra. Miresaka momba ny olana aho amin'ny fampiasana ny ohatry ny asa fampihenana ny fisondrotan'ny mpanjifa - izany no ezahin'ny mpandraharaha amin'ny fifandraisan-davitra amin'ny alàlan'ny Big Data amin'ny voalohany.
Mametraka tanjona. Ny famaritana ara-teknika nosoratana tsara sy ny fahatakarana samihafa momba ny teny dia fanaintainan'ny taonjato maro fa tsy ho an'ny freelancer ihany. Na dia ny mpanjifa "nilatsaka" aza dia azo adika amin'ny fomba samihafa - toy ireo izay tsy nampiasa ny serivisy mpandraharaha nandritra ny iray volana, enim-bolana na herintaona. Ary mba hamoronana MVP mifototra amin'ny angon-drakitra ara-tantara dia mila mahatakatra ny habetsaky ny fiverenan'ny mpanjifa avy amin'ny churn ianao - ireo izay nanandrana mpandraharaha hafa na nandao ny tanàna ary nampiasa isa hafa. Fanontaniana manan-danja iray hafa: mandra-pahoviana alohan'ny handehanan'ny mpanjifa no tokony hamaritra izany sy handray fepetra ny mpamatsy? Enim-bolana aloha loatra, herinandro tara loatra.
Fanoloana hevitra. Amin'ny ankapobeny, ny mpandraharaha dia mamaritra mpanjifa amin'ny nomeraon-telefaona, noho izany dia lojika raha tokony hampidirina amin'ny fampiasana azy ireo famantarana. Ahoana ny momba ny kaontinao manokana na ny laharan'ny fangatahana serivisy? Ilaina ny manapa-kevitra hoe inona no vondrona tokony horaisina ho mpanjifa mba tsy hiovaova ny angon-drakitra ao amin'ny rafitry ny mpandraharaha. Ny fanombanana ny sandan'ny mpanjifa dia mampametra-panontaniana ihany koa - iza no mpanjifa no sarobidy kokoa ho an'ny orinasa, izay mpampiasa mila ezaka bebe kokoa mba hitazonana, ary iza no "hianjera" na inona na inona ary tsy misy dikany ny fandaniana loharanon-karena amin'izy ireo.
Tsy fahampian'ny fampahalalana. Tsy ny mpiasan'ny mpamatsy rehetra no afaka manazava amin'ny ekipan'ny BigData izay misy fiantraikany manokana amin'ny fikorontanan'ny mpanjifa sy ny fomba kajy ny anton-javatra mety amin'ny faktiora. Na dia nanonona ny iray amin'izy ireo aza - ARPU - dia hita fa azo atao amin'ny fomba samihafa izany: na amin'ny alàlan'ny fandoavana ny mpanjifa tsy tapaka, na amin'ny faktiora mandeha ho azy. Ary ao anatin'ny dingan'ny asa, fanontaniana iray tapitrisa hafa no mipoitra. Mandrakotra ny mpanjifa rehetra ve ny modely, ohatrinona ny vidin'ny fitazonana mpanjifa iray, misy dikany ve ny mieritreritra modely hafa, ary inona no tokony hatao amin'ireo mpanjifa izay voatazona amin'ny fomba diso.
Fametrahana tanjona. Mahafantatra karazana fahadisoana telo aho izay mahatonga ny mpandraharaha ho sosotra amin'ny angon-drakitra.
- Ny mpamatsy dia mampiasa vola ao amin'ny BigData, manodina vaovao gigabytes, saingy mahazo vokatra azo alaina mora kokoa. Kisary sy modely tsotra, analyse primitive no ampiasaina. Ny vidiny dia avo avo heny, fa ny vokany dia mitovy.
- Ny mpandraharaha dia mandray angon-drakitra maro karazana ho vokatra, saingy tsy azony ny fomba fampiasana azy. Misy analyse - eto dia azo takarina sy be dia be, saingy tsy misy ilana azy. Ny vokatra farany, izay tsy afaka ahitana ny tanjon'ny "fanodinana angon-drakitra", dia tsy noeritreretina. Tsy ampy ny fanodinana - ny analytics dia tokony ho fototry ny fanavaozana ny fizotran'ny orinasa.
- Ny sakana amin'ny fampiasana ny famakafakana BigData dia mety ho fizotry ny raharaham-barotra efa lany andro sy rindrambaiko tsy mety amin'ny tanjona vaovao. Midika izany fa nanao fahadisoana izy ireo tamin'ny dingana fanomanana - tsy nieritreritra ny algorithm amin'ny hetsika sy ny dingana fampidirana Big Data ho an'ny asa.
What for
Miresaka momba ny vokatra. Hojereko ny fomba fampiasana sy fitadiavam-bola ny Big Data izay efa ampiasain'ny mpandraharahan'ny fifandraisandavitra.
Ny mpamatsy dia maminavina tsy ny fivoahan'ny mpanjifa ihany, fa ny enta-mavesatra amin'ny toby toby.
- Ny fampahalalam-baovao momba ny fihetsiky ny mpanjifa, ny hetsika ary ny serivisy matetika dia nodinihina. Vokany: fampihenana ny isan'ny enta-mavesatra noho ny fanatsarana sy fanavaozana ny faritra misy olana amin'ny fotodrafitrasa.
- Mampiasa fampahalalana momba ny geolocation ny mpanjifa sy ny haavon'ny fifamoivoizana ny mpandraharaha amin'ny telefaona rehefa manokatra toeram-pivarotana. Noho izany, ny BigData analytics dia efa ampiasain'ny MTS sy VimpelCom hanomanana ny toerana misy ny birao vaovao.
- Manome vola ny angon-drazany manokana ireo mpamatsy amin'ny fanomezana izany ho an'ny antoko fahatelo. Ny mpanjifa lehibe amin'ny mpandraharaha BigData dia banky ara-barotra. Amin'ny alàlan'ny angon-drakitra, manara-maso ny hetsika mampiahiahy amin'ny karatra SIM an'ny mpanjifa izay ampifandraisina amin'ireo karatra izy ireo, ary mampiasa tolotra fanamarihan'ny risika, fanamarinana ary fanaraha-maso. Ary tamin'ny 2017, ny governemanta Moskoa dia nangataka ny fihetsehana mifototra amin'ny angona BigData avy amin'ny Tele2 mba handrafetana fotodrafitrasa ara-teknika sy fitaterana.
- BigData analytics dia toeram-pitrandrahana volamena ho an'ny mpivarotra, izay afaka mamorona fanentanana dokam-barotra manokana ho an'ny vondrona mpanjifa an'arivony raha misafidy. Ny orinasam-pifandraisan-davitra dia manangona ny mombamomba ny fiaraha-monina, ny tombontsoan'ny mpanjifa ary ny fomba fitondran'ny mpanjifa, ary avy eo dia mampiasa ny BigData voaangona mba hisarihana mpanjifa vaovao. Fa ho an'ny fampiroboroboana midadasika sy ny drafitra PR, ny faktiora dia tsy manana fiasa ampy foana: ny programa dia tsy maintsy mandinika lafin-javatra maro mifanaraka amin'ny fampahalalana amin'ny antsipiriany momba ny mpanjifa.
Raha mbola mihevitra ny BigData ho fehezanteny foana ny sasany, dia efa mahazo vola amin'izany ny Big Four. Mahazo 14 lavitrisa roubles ny MTS amin'ny fanodinana angon-drakitra lehibe ao anatin'ny enim-bolana, ary ny Tele2 dia nampitombo ny fidiram-bolan'ny tetikasa in-telo sy tapany. Ny BigData dia miala amin'ny fironana ho tsy maintsy ananana, izay hananganana indray ny rafitry ny mpandraharahan'ny fifandraisandavitra rehetra.
Source: www.habr.com