Hoo e ka bang likhoeli tse tšeletseng tse fetileng ke ntse ke theha mokhoa oa ho loantša bomenemene (ts'ebetso ea bolotsana, bomenemene, joalo-joalo) ntle le lisebelisoa tsa pele bakeng sa sena. Mehopolo ea kajeno eo re e fumaneng le ho e sebelisa tsamaisong ea rona e re thusa ho lemoha le ho sekaseka liketso tse ngata tsa bolotsana. Sehloohong sena, ke rata ho bua ka melao-motheo eo re ileng ra e latela le seo re se entseng ho finyella boemo ba hona joale ba tsamaiso ea rona, ntle le ho kena karolong ea theknoloji.
Melao-motheo ea tsamaiso ea rona
Ha u utloa mantsoe a kang "automatic" le "fraud," u ka 'na ua qala ho nahana ka ho ithuta ka mochine, Apache Spark, Hadoop, Python, Airflow, le mahlale a mang a tsoang ho Apache Foundation ecosystem le lefapha la Data Science. Ke nahana hore ho na le karolo e le 'ngoe ea ho sebelisa lisebelisoa tsena eo hangata e sa boleloang: e hloka lintho tse hlokahalang tsamaisong ea hau ea khoebo pele o ka qala ho li sebelisa. Ka bokhutšoanyane, o hloka sethala sa data sa khoebo se kenyelletsang letša la data le ntlo ea polokelo. Empa ho thoe'ng haeba ha u na sethala se joalo 'me u ntse u hloka ho ntlafatsa mokhoa ona? Melao-motheo e latelang eo ke e arolelanang ka tlase e re thusitse ho fihla moo re ka tsepamisang maikutlo ho ntlafatsa maikutlo a rona ho e-na le ho fumana e sebetsang. Leha ho le joalo, sena ha se sebaka sa projeke. Ho ntse ho e-na le lintho tse ngata moralong ho latela pono ea theknoloji le sehlahisoa.
Molao-motheo oa 1: Boleng ba Khoebo Pele
Re beha "boleng ba khoebo" ka pele ho boiteko bohle ba rona. Ka kakaretso, tsamaiso leha e le efe ea ho hlahloba ka mokhoa o itekanetseng ke ea sehlopha sa mekhoa e rarahaneng e nang le boemo bo phahameng ba ho iketsetsa le ho rarahana ha theknoloji. Ho theha tharollo e feletseng ho tla nka nako e ngata haeba u e bōpa ho tloha qalong. Re nkile qeto ea ho beha boleng ba khoebo pele le botlalo ba thekenoloji boemong ba bobeli. Bophelong, sena se bolela hore ha re amohele theknoloji e tsoetseng pele e le thuto ea motheo. Re khetha theknoloji e sebetsang hantle bakeng sa rona hajoale. Ha nako e ntse e ea, ho ka bonahala eka re tla tlameha ho kenya tšebetsong li-module tse ling hape. Ena ke tumellano eo re e amohetseng.
Molao-motheo oa 2: Bohlale bo ekelitsoeng
Ke becha batho ba bangata ba sa ameheng ka botebo ho nts'etsapele litharollo tsa ho ithuta ka mochini ba ka nahana hore ho nkela batho sebaka ke sepheo. Ebile, litharollo tsa ho ithuta ka mochini ha li ea phethahala, 'me ke libakeng tse ling feela moo ho ka khonehang. Re hanne mohopolo ona ho tloha qalong ka mabaka a 'maloa: data e sa leka-lekaneng mabapi le ts'ebetso ea bomenemene le ho se khone ho fana ka lethathamo le felletseng la likarolo bakeng sa mehlala ea ho ithuta mochini. Ka lehlakoreng le leng, re ile ra khetha khetho e ntlafalitsoeng ea bohlale. Ona ke mohopolo o mong oa bohlale ba maiketsetso o shebaneng le karolo ea tšehetso ea AI, e totobatsang taba ea hore mahlale a kelello a reretsoe ho ntlafatsa bohlale ba motho ho fapana le ho e nkela sebaka. [1]
Ka lebaka lena, ho theha tharollo e felletseng ea ho ithuta mochini ho tloha qalong ho tla hloka boiteko bo boholo, bo ka liehisang tlhahiso ea boleng ba khoebo ea rona. Re nkile qeto ea ho theha sistimi e nang le karolo e ntseng e hola khafetsa ea ho ithuta ka mochini tlasa tataiso ea litsebi tsa sebaka sa rona. Karolo e phephetsang ea ho theha tsamaiso e joalo ke hore e tlameha ho fa bahlahlobisisi ba rona linyeoe eseng feela ho latela hore na ke mosebetsi oa bolotsana kapa che. Ka kakaretso, phoso efe kapa efe boitšoarong ba bareki ke taba e belaetsang eo litsebi li lokelang ho e etsa lipatlisiso le ho arabela ka tsela e itseng. Ke karoloana feela ea linyeoe tsena tse tlalehiloeng e ka hlalosoang e le bomenemene.
Molao-motheo oa 3: Sethala sa Rich Analytics
Karolo e thata ka ho fetisisa ea sistimi ea rona ke netefatso ea ho qetela ea ts'ebetso ea sistimi. Bahlahlobisisi le ba ntlafatsang ba tlameha ho fumana li-sete tsa data tsa nalane ha bonolo ka li-metrics tsohle tse sebelisoang bakeng sa tlhahlobo. Ho feta moo, sethala sa data se lokela ho fana ka mokhoa o bonolo oa ho tlatselletsa metrics e teng ka e mecha. Mekhoa eo re e etsang, 'me tsena ha se lits'ebetso tsa software feela, e lokela ho re lumella ho bala linako tse fetileng habonolo, ho eketsa metrics e mecha le ho fetola ponelopele ea data. Re ka finyella sena ka ho bokella boitsebiso bohle boo tsamaiso ea rona ea tlhahiso e bo hlahisang. Tabeng ena, data e ne e tla fetoha khathatso butle-butle. Re tla hloka ho boloka palo e ntseng e eketseha ea data eo re sa e sebeliseng le ho e sireletsa. Boemong bo joalo, data e tla fetoha e se nang thuso haholoanyane ha nako e ntse e ea, empa e ntse e hloka boiteko ba rona ho e laola. Ho rona, ho bokella data ho ne ho sa utloahale, kahoo re nkile qeto ea ho nka mokhoa o fapaneng. Re nkile qeto ea ho hlophisa mabenkele a data a nako ea 'nete ho potoloha mekhatlo eo re batlang ho e arola, le ho boloka feela data e re lumellang ho lekola linako tsa morao-rao le tse amehang. Phephetso boitekong bona ke hore sistimi ea rona e fapane, e na le mabenkele a mangata a data le li-module tsa software tse hlokang moralo o hlokolosi ho sebetsa ka mokhoa o ts'oanang.
Likhopolo tsa moralo oa sistimi ea rona
Re na le likarolo tse 'ne tsa mantlha tsamaisong ea rona: sisteme ea ho kenella, computational, tlhahlobo ea BI le sistimi ea ho latela. Li sebeletsa merero e ikhethileng, e ikhethileng, 'me re li boloka li arohane ka ho latela mekhoa e ikhethileng ea moralo.
Moralo o thehiloeng konteraka
Pele ho tsohle, re lumellane hore likarolo li lokela ho itšetleha feela ka mekhoa e itseng ea data (likonteraka) tse fetisitsoeng pakeng tsa tsona. Sena se etsa hore ho be bonolo ho kopanya pakeng tsa bona le ho se qobelle sebopeho se itseng (le tatellano) ea likarolo. Ka mohlala, maemong a mang sena se re lumella ho kopanya ka ho toba tsamaiso ea ho kenya letsoho le mokhoa oa ho latela tlhokomeliso. Boemong bo joalo, sena se tla etsoa ho latela tumellano ea tlhokomeliso eo ho lumellanoeng ka eona. Sena se bolela hore likarolo tseo ka bobeli li tla kopanngoa ho sebelisoa konteraka eo karolo leha e le efe e 'ngoe e ka e sebelisang. Ha re na ho kenya konteraka e eketsehileng ho kenya litlhokomeliso ho sistimi ea ho latedisa ho tsoa ho sistimi ea ho kenya. Mokhoa ona o hloka hore ho sebelisoe palo e fokolang e reriloeng esale pele ea likonteraka mme e nolofatsa sistimi le likhokahano. Ha e le hantle, re nka mokhoa o bitsoang "Contract First Design" ebe re o sebelisa ho likonteraka tsa ho phallela. [2]
Phallela hohle
Ho boloka le ho laola boemo tsamaisong ho tla baka mathata ts'ebetsong ea eona. Ka kakaretso, mmuso o lokela ho fumaneha ho tsoa ho karolo efe kapa efe, e lokela ho ts'oana le ho fana ka boleng ba hajoale ho feta likarolo tsohle, 'me e lokela ho ts'epahala ka litekanyetso tse nepahetseng. Ho feta moo, ho ba le mehala ea ho boloka nako e telele ho khutlisa boemo ba morao-rao ho tla eketsa palo ea ts'ebetso ea I / O le ho rarahana ha li-algorithms tse sebelisoang liphaepheng tsa rona tsa nako ea nnete. Ka lebaka la sena, re ile ra etsa qeto ea ho tlosa polokelo ea mmuso, haeba ho khoneha, ka ho feletseng tsamaisong ea rona. Mokhoa ona o hloka hore lintlha tsohle tse hlokahalang li kenyelelitsoe ho thibela data e fetisitsoeng (molaetsa). Ka mohlala, haeba re hloka ho bala palo eohle ea litlhaloso tse ling (palo ea ts'ebetso kapa linyeoe tse nang le litšobotsi tse itseng), re li bala ka mohopolo le ho hlahisa molapo oa litekanyetso tse joalo. Li-module tse itšetlehileng ka tsona li tla sebelisa karohano le ho kopanya ho arola molatsoana ka mekhatlo le ho sebetsa ho latela boleng ba morao-rao. Mokhoa ona o ile oa felisa tlhoko ea ho ba le polokelo e tsitsitseng ea disk bakeng sa data e joalo. Sistimi ea rona e sebelisa Kafka joalo ka morekisi oa melaetsa mme e ka sebelisoa joalo ka database e nang le KSQL. [3] Empa ho e sebelisa ho ka be ho tlamahantse tharollo ea rona haholo ho Kafka, mme ra etsa qeto ea ho se e sebelise. Mokhoa oo re o khethileng o re lumella ho nkela Kafka sebaka ka morekisi e mong oa molaetsa ntle le liphetoho tse kholo tsa kahare ho sistimi.
Khopolo ena ha e bolele hore ha re sebelise polokelo ea disk le databases. Ho leka le ho sekaseka ts'ebetso ea sistimi, re hloka ho boloka palo e kholo ea data ho disk e emelang metrics le linaha tse fapaneng. Taba ea bohlokoa mona ke hore li-algorithms tsa nako ea nnete ha li itšetlehe ka data e joalo. Hangata, re sebelisa lintlha tse bolokiloeng bakeng sa tlhahlobo ea kantle ho marang-rang, ho lokisa liphoso le ho latella maemo a itseng le liphetho tse hlahisoang ke sistimi.
Mathata a tsamaiso ea rona
Ho na le mathata a itseng ao re a rarollotseng ho isa boemong bo itseng, empa a hloka tharollo e nahannoeng haholoanyane. Joale ke rata ho li bolela mona hobane ntlha ka 'ngoe e tšoanela sehlooho sa eona.
- Re ntse re hloka ho hlalosa lits'ebetso le melaoana e ts'ehetsang pokello ea lintlha tse bohlokoa le tse bohlokoa bakeng sa tlhahlobo ea rona ea boitsebiso, ho sibolloa le boithuto.
- Ho kenyelletsoa ha tlhahlobo ea batho ho fella ka mokhoa oa ho iketsetsa sistimi ho e nchafatsa ka lintlha tsa morao-rao. Sena ha se ho ntlafatsa mofuta oa rona feela, empa hape se ntlafatsa lits'ebetso tsa rona le ho ntlafatsa kutloisiso ea rona ea data ea rona.
- Ho fumana ho leka-lekana pakeng tsa mokhoa oa deterministic oa IF-ELSE le ML. Motho e mong o itse, "ML ke sesebelisoa sa ba tsielehileng." Sena se bolela hore u tla batla ho sebelisa ML ha u se u sa utloisise mokhoa oa ho ntlafatsa le ho ntlafatsa algorithm ea hau. Ka lehlakoreng le leng, mokhoa oa deterministic ha o lumelle ho lemoha lintho tse sa tloaelehang tse neng li sa lebelloa.
- Re hloka mokhoa o bonolo oa ho leka menahano ea rona kapa likamano lipakeng tsa metrics ho data.
- Sistimi e tlameha ho ba le maemo a 'maloa a liphetho tse ntle tsa' nete. Linyeoe tsa bomenemene ke karoloana feela ea linyeoe tsohle tse ka nkoang li le ntle bakeng sa tsamaiso. Ka mohlala, bahlahlobisisi ba batla ho amohela linyeoe tsohle tse belaetsang bakeng sa ho netefatsoa, 'me ke karolo e nyenyane feela ea tsona e leng bomenemene. Sistimi e tlameha ho hlahisa linyeoe tsohle ho bahlahlobisisi, ho sa tsotelehe hore na ke bomenemene kapa ke boitšoaro bo belaetsang feela.
- Sethala sa data se lokela ho khona ho khutlisa li-sete tsa data tsa nalane ka lipalo tse hlahisitsoeng le tse baloang ka fofa.
- Kenya likarolo tsohle tsa sistimi ka mokhoa o bonolo le ka boiketsetso bonyane libakeng tse tharo tse fapaneng: tlhahiso, liteko (beta) le bakeng sa bahlahisi.
- 'Me qetellong empa eseng bonyane. Re hloka ho theha sethala se ruileng sa tlhahlobo ea ts'ebetso moo re ka sekasekang mefuta ea rona. [4]
litšupiso
Source: www.habr.com