Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Hawlgal kasta oo xogeed oo weyn wuxuu u baahan yahay awood xisaabeed badan. Dhaqdhaqaaqa caadiga ah ee xogta laga soo qaado kaydka xogta ee Hadoop waxay qaadan kartaa toddobaadyo ama waxay ku kici kartaa inta ay le'eg tahay garabka diyaaradda. Ma rabtaa inaad sugto oo aad lacag ku bixiso? Isku dheelli tirka culeyska qeybaha kala duwan. Hal dariiq ayaa ah hagaajinta hoos u dhigista.

Waxaan waydiistay tababaraha hogaaminaya Russia ee horumarinta iyo maamulka alaabta Informatica, Alexey Ananyev, si uu uga hadlo shaqada kor u qaadista ee Informatica Big Data Management (BDM). Weligaa ma baratay inaad la shaqeyso alaabada Informatica? Waxay u badan tahay, waxay ahayd Alexey kan kuu sheegay aasaaska PowerCenter oo kuu sharaxay sida loo dhiso khariidadaha.

Alexey Ananyev, madaxa tababarka ee kooxda DIS

Waa maxay riixitaan?

Qaar badan oo idinka mid ah ayaa horeyba u yaqaanay Informatica Big Data Management (BDM). Alaabtu waxay isku dari kartaa xog weyn oo ka timid ilo kala duwan, waxay u dhex mari kartaa nidaamyo kala duwan, waxay si fudud u heli kartaa, waxay kuu ogolaaneysaa inaad si cad u qeexdo, iyo wax ka badan.
Gacmaha midig, BDM waxay ku shaqayn kartaa yaabab: hawluhu si degdeg ah ayaa loo dhamayn doonaa iyo ilaha xisaabinta ugu yar.

Adiguna ma taas rabtaa? Baro inaad isticmaasho sifada riixitaanka ee BDM si aad ugu qaybiso culayska xisaabinta ee qaybaha kala duwan. Tiknoolajiyada Pushdown waxay kuu ogolaanaysaa inaad u beddesho khariidaynta qoraal oo aad doorato deegaanka uu qoraalkani ku shaqayn doono. Doorashadani waxay kuu ogolaaneysaa inaad isku darsato awoodaha goobo kala duwan oo aad ku guuleysato waxqabadkooda ugu sarreeya.

Si loo habeeyo deegaanka fulinta qoraalka, waxaad u baahan tahay inaad doorato nooca riixitaanka. Qoraalka waxaa lagu socodsiin karaa gebi ahaanba Hadoop ama qayb ahaan waxaa loo qaybin karaa inta u dhaxaysa isha iyo saxanka. Waxaa jira 4 nooc oo riixitaan oo suurtagal ah. Khariidaynta looma baahna in loo rogo qoraal (dhalad ah). Khariidaynta waxaa lagu samayn karaa inta ugu badan ee suurtogalka ah isha (isha) ama gebi ahaanba isha (buuxa). Khariidaynta sidoo kale waxa loo rogi karaa qoraalka Hadoop (midna).

Hoos u dhigista

Noocyada 4 ee liiska ah ayaa lagu dari karaa siyaabo kala duwan - riixitaanka ayaa loo hagaajin karaa baahiyaha gaarka ah ee nidaamka. Tusaale ahaan, inta badan way ku habboon tahay in xogta laga soo saaro kaydka iyada oo la adeegsanayo awooddeeda. Xogtana waxa loo rogi doonaa iyada oo la isticmaalayo Hadoop, si aanay u culaysin kaydka xogta lafteeda.

Aynu tixgelinno kiiska marka isha iyo meesha ay ku sugan yihiinba ay ku jiraan kaydka xogta, iyo goobta fulinta isbeddelka ayaa la dooran karaa: iyadoo ku xiran goobaha, waxay noqon doontaa Informatica, server database, ama Hadoop. Tusaalaha noocan oo kale ah ayaa kuu ogolaanaya inaad si sax ah u fahamto dhinaca farsamada ee hawlgalka habkan. Dabcan, nolosha dhabta ah, xaaladdani ma soo baxdo, laakiin waxay ku habboon tahay muujinta shaqeynta.

Aynu soo qaadno khariidad si aynu u akhrino laba jaantus oo ku jira kaydka xogta Oracle. Natiijooyinka wax-akhrintana ha lagu qoro jadwal isla xogtaas ku jira. Qorshaha khariidaynta ayaa noqon doona sidan:

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Qaabka khariidaynta ee Informatica BDM 10.2.1 waxay u egtahay sidan:

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Nooca riixitaanka - waddan

Haddii aan dooranno nooca riixitaanka, markaa khariidaynta waxaa lagu samayn doonaa server-ka Informatica. Xogta waxaa laga akhrin doonaa server-ka Oracle, waxaa loo wareejin doonaa server-ka Informatica, halkaas ayaa lagu beddeli doonaa waxaana loo wareejin doonaa Hadoop. Si kale haddii loo dhigo, waxaan heli doonaa habka ETL ee caadiga ah.

Nooca riixitaanka - isha

Marka aan dooranayno nooca isha, waxaan helnaa fursad aan ku qaybin karno habkayaga inta u dhaxaysa server-ka xogta (DB) iyo Hadoop. Marka habraaca lagu fuliyo goobtan, codsiyada lagu soo saarayo xogta shaxda waxa loo diri doonaa kaydka xogta. Inta soo hartayna waxaa loo samayn doonaa qaab tillaabo ah oo ku saabsan Hadoop.
Jaantuska fulinta wuxuu u ekaan doonaa sidan:

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Hoos waxaa ku yaal tusaale ah dejinta jawiga runtime.

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Xaaladdan oo kale, khariidadeynta waxaa lagu sameyn doonaa laba tallaabo. Meelaheeda waxaan ku arki doonaa inay isu rogtay qoraal loo diri doono isha. Waxaa intaa dheer, isku darka miisaska iyo beddelka xogta waxaa loo samayn doonaa qaab su'aal la dhaafiyay oo ku saabsan isha.
Sawirka hoose, waxaan ku aragnaa khariidad la hagaajiyay ee BDM, iyo weydiinta dib loo qeexay ee isha.

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Doorka Hadoop ee qaabayntan waxa lagu dhimi doonaa maaraynta socodka xogta - abaabulkeeda. Natiijada weydiinta waxaa loo diri doonaa Hadoop. Marka akhrinta la dhammeeyo, faylka Hadoop ayaa lagu qori doonaa saxanka.

Nooca riixitaanka - buuxa

Markaad doorato nooca buuxa, khariidaynta waxay gabi ahaanba isu rogi doontaa xog xog ururin. Natiijada codsigana waxaa loo diri doonaa Hadoop. Jaantuska habkan ayaa lagu soo bandhigay hoos.

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Tusaalaha habaynta ayaa lagu muujiyay hoos.

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Natiijo ahaan, waxaan heli doonaa khariidad la wanaajiyay oo la mid ah tii hore. Farqiga kaliya ayaa ah in dhammaan caqli-galnimada loo wareejiyo qaataha qaab ka-hortagga gelinta. Tusaalaha khariidaynta la hagaajiyay ayaa hoos lagu soo bandhigay.

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Halkan, sida kiiskii hore, Hadoop wuxuu ciyaaraa doorka kirishbooyada. Laakiin halkan isha ayaa lagu akhriyaa gebi ahaanba, ka dibna caqli-celinta xogta waxaa lagu sameeyaa heerka qaataha.

Nooca riixitaanka waa waxba

Hagaag, ikhtiyaarka ugu dambeeya waa nooca riixitaanka, kaas oo khariidayntayadu ay u beddeli doonto qoraalka Hadoop.

Khariidaynta la hagaajiyay hadda waxay u ekaan doontaa sidan:

Sida loo guuro, loo geliyo oo loo dhexgeliyo xog aad u weyn oo jaban oo degdeg ah? Waa maxay hagaajinta hoos u dhigista?

Halkan xogta laga helay faylasha isha ayaa marka hore lagu akhriyi doonaa Hadoop. Dabadeed, isaga oo isticmaalaya awooddiisa, labadan fayl ayaa la isku dari doonaa. Taas ka dib, xogta waa la beddeli doonaa oo la gelin doonaa database-ka.

Markaad fahamto mabaadi'da hagaajinta hoos-u-dhigga, waxaad si wax ku ool ah u habayn kartaa habab badan oo ku shaqeynaya xog weyn. Sidaa darteed, dhawaan, shirkad weyn, dhowr toddobaad gudahood, ayaa xogta weyn ka soo dejisay kaydinta Hadoop, oo ay hore u ururisay dhowr sano.

Source: www.habr.com

Add a comment