Tonga ny ho avy, ary efa am-pahombiazana ny fampiasan'ny magazay tianao indrindra, ny orinasam-pitaterana ary na ny fiompiana vorontsiloza aza ny teknolojia artifisialy sy fianarana milina.
Ary raha misy zavatra misy, dia efa misy momba izany amin'ny Internet ... tetikasa misokatra! Jereo ny fomba ahafahan'ny Open Data Hub manampy anao hampitombo ny teknolojia vaovao sy hisorohana ny fanamby amin'ny fampiharana.
Miaraka amin'ny tombony rehetra amin'ny faharanitan-tsaina artifisialy (AI) sy ny fianarana milina (ML), matetika ny fikambanana dia manana fahasarotana amin'ny fampitomboana ireo teknolojia ireo. Ny olana lehibe amin'ity tranga ity dia matetika ireto manaraka ireto:
- Fifanakalozana vaovao sy fiaraha-miasa - saika tsy azo atao ny mifanakalo vaovao amin'ny fomba mora sy miara-miasa amin'ny famerenana haingana.
- Fidirana angona - ho an'ny asa tsirairay dia mila amboarina indray sy amin'ny tanana izany, izay mitaky fotoana be.
- Access on demand - tsy misy fomba hahazoana fidirana amin'ny fitaovana fianarana milina sy sehatra, ary koa ny fotodrafitrasa informatika.
- Famokarana - ny modely dia mijanona amin'ny dingana prototype ary tsy entina amin'ny fampiasana indostrialy.
- Araho sy hazavao ny valin'ny AI - Sarotra ny famerenana, ny fanaraha-maso ary ny fanazavana ny valin'ny AI/ML.
Raha tsy voavaha, ireo olana ireo dia misy fiatraikany ratsy amin'ny hafainganana, ny fahombiazany ary ny famokaran'ny mpahay siansa momba ny data sarobidy. Izany dia mitarika ho amin'ny fahasorenan'izy ireo, fahadisoam-panantenana amin'ny asany, ary vokatr'izany dia very maina ny fanantenan'ny orinasa momba ny AI/ML.
Ny tompon'andraikitra amin'ny famahana ireo olana ireo dia miankina amin'ny manam-pahaizana momba ny IT, izay tsy maintsy manome ireo mpandinika angona - marina izany, zavatra toy ny rahona. Amin'ny antsipiriany bebe kokoa, mila sehatra manome fahalalahana hisafidy isika ary manana fidirana mora sy mora. Mandritra izany fotoana izany, dia haingana, mora reconfigurable, scalable amin'ny fangatahana ary mahatohitra ny tsy fahombiazana. Ny fananganana sehatra toy izany amin'ny teknolojia open source dia manampy amin'ny fisorohana ny fanakatonan'ny mpivarotra ary mitazona tombony stratejika maharitra amin'ny resaka fanaraha-maso ny vidiny.
Taona vitsy lasa izay, nisy zavatra mitovy amin'izany nitranga teo amin'ny fampivoarana ny fampiharana ary nitarika ny firongatry ny microservices, hybrid clouds, IT automation ary agile process. Mba hiatrehana izany rehetra izany dia nitodika tany amin'ny kaontenera, Kubernetes ary rahona hybrid misokatra ny matihanina IT.
Ity traikefa ity dia ampiharina izao mba hamaliana ny fanambin'i Al. Izany no mahatonga ny matihanina amin'ny IT hanangana sehatra mifototra amin'ny kaontenera, ahafahan'ny famoronana serivisy AI/ML ao anatin'ny dingana mavitrika, manafaingana ny fanavaozana ary namboarina miaraka amin'ny maso mankany amin'ny rahona hybrid.
Hanomboka hanangana sehatra toy izany izahay miaraka amin'ny Red Hat OpenShift, sehatra Kubernetes voatahiry ho an'ny rahona hybrid, izay manana tontolo iainana mitombo haingana amin'ny vahaolana ML rindrambaiko sy hardware (NVIDIA, H2O.ai, Starburst, PerceptiLabs, sns.). Ny sasany amin'ireo mpanjifan'ny Red Hat, toa ny BMW Group, ExxonMobil ary ny hafa, dia efa nametraka ireo fitaovana ML fitaovana sy ny fizotran'ny DevOps ao an-tampon'ny sehatra sy ny tontolo iainana mba hitondrana ny maritrano ML amin'ny famokarana sy hanafaingana ny asan'ny mpandinika data.
Ny antony iray hafa nanangananay ny tetikasa Open Data Hub dia ny fanehoana ohatra momba ny maritrano mifototra amin'ny tetikasa rindrambaiko open source maro ary mampiseho ny fomba fampiharana ny tsingerin'ny fiainan'ny vahaolana ML iray mifototra amin'ny sehatra OpenShift.
Open Data Hub Project
Tetikasa loharano misokatra ity izay novolavolaina tao anatin'ny vondrom-piarahamonina fampandrosoana mifanandrify aminy ary manatanteraka tsingerin'ny asa feno - manomboka amin'ny fametahana sy fanovana angon-drakitra voalohany ho amin'ny famokarana, fanofanana ary fikojakojana modely - rehefa mamaha ny olan'ny AI / ML amin'ny fampiasana container sy Kubernetes amin'ny OpenShift sehatra. Ity tetikasa ity dia azo raisina ho fampiharana reference, ohatra amin'ny fananganana vahaolana misokatra AI/ML-as-a-service mifototra amin'ny OpenShift sy ireo fitaovana loharano misokatra mifandraika toy ny Tensorflow, JupyterHub, Spark ary ny hafa. Zava-dehibe ny manamarika fa ny Red Hat mihitsy no mampiasa ity tetikasa ity mba hanomezana ny serivisy AI/ML. Ho fanampin'izany, ny OpenShift dia mitambatra amin'ny vahaolana ML rindrambaiko sy hardware lehibe avy amin'ny NVIDIA, Seldon, Starbust ary mpivarotra hafa, manamora ny fananganana sy ny fitantanana ny rafitra fianarana milina anao manokana.
Ny tetikasa Open Data Hub dia mifantoka amin'ireto sokajin'ny mpampiasa sy trangan-javatra fampiasana ireto:
- Mpanadihady angon-drakitra mila vahaolana amin'ny fampiharana ny tetikasa ML, voalamina toy ny rahona miaraka amin'ny fiasan-tena.
- Data Analyst izay mila safidy ambony indrindra amin'ny fitaovana sy sehatra AI/ML open source farany indrindra.
- Mpanadihady data izay mila fidirana amin'ny loharanom-baovao rehefa manofana modely.
- Mpandinika angon-drakitra mila fidirana amin'ny loharanon-karena (CPU, GPU, fitadidiana).
- Data Analyst izay mitaky fahaizana miara-miasa sy mizara asa amin'ny mpiara-miasa, mahazo valiny ary manao fanatsarana amin'ny famerenana haingana.
- Mpanadihady angon-drakitra te hifanerasera amin'ny mpamorona (sy ekipa devops) mba hidirana amin'ny famokarana ny maodely ML sy ny vokatry ny asany.
- Injeniera data izay mila manome mpandinika angon-drakitra amin'ny fidirana amin'ny loharanom-baovao isan-karazany nefa manaraka ny fepetra takian'ny lalΓ na sy fiarovana.
- Administrator/mpandraharahan'ny rafitra IT izay mitaky fahaizana mifehy mora foana ny tsingerin'ny fiainana (fametrahana, fanamafisam-peo, fanavaozana) ny singa sy ny teknolojia open source. Mila fitantanam-pitantanana mifanaraka amin'izany koa isika.
Ny tetikasa Open Data Hub dia mivondrona fitaovana loharano misokatra isan-karazany mba hampiharana tsingerina feno amin'ny fiasan'ny AI/ML. Jupyter Notebook dia ampiasaina eto ho fitaovana miasa ho an'ny famakafakana data. Ny kitapom-pitaovana dia malaza amin'ny mpahay siansa amin'izao fotoana izao, ary ny Open Data Hub dia ahafahan'izy ireo mamorona sy mitantana mora foana ny toeram-piasana Jupyter Notebook amin'ny fampiasana ny JupyterHub naorina. Ho fanampin'ny famoronana sy fanafarana kahie Jupyter, ny tetikasa Open Data Hub dia ahitana kahie maromaro efa vita amin'ny endrika AI Library.
Ity trano famakiam-boky ity dia fitambarana singa fianarana milina mivelatra sy vahaolana ho an'ny toe-javatra mahazatra izay manatsotra ny prototyping haingana. JupyterHub dia tafiditra amin'ny modely fidirana RBAC OpenShift, izay ahafahanao mampiasa kaonty OpenShift efa misy ary manatanteraka sonia tokana. Ho fanampin'izany, JupyterHub dia manolotra interface tsara ho an'ny mpampiasa antsoina hoe spawner, izay ahafahan'ny mpampiasa manamboatra mora foana ny habetsaky ny loharanon-karena (CPU cores, memory, GPU) ho an'ny Jupyter Notebook voafantina.
Rehefa avy namorona sy nanamboatra ny solosaina finday ny mpandinika angona, dia karakarain'ny mpandrindra Kubernetes, izay ao anatin'ny OpenShift, ny olana hafa rehetra momba azy. Ny mpampiasa ihany no afaka manao ny andrana, mitahiry ary mizara ny vokatry ny asany. Ho fanampin'izany, ireo mpampiasa efa mandroso dia afaka miditra mivantana amin'ny akorandriaka OpenShift CLI mivantana avy amin'ny kahie Jupyter mba hampiasana ny primitives Kubernetes toy ny Job na OpenShift toy ny Tekton na Knative. Na ho an'izany dia azonao atao ny mampiasa ny GUI mety amin'ny OpenShift, izay antsoina hoe "Console web OpenShift".
Miroso amin'ny dingana manaraka, ny Open Data Hub dia ahafahana mitantana ny fantsona data. Ho an'izany dia ampiasaina ny zavatra Ceph, izay omena ho fitahirizana angon-drakitra mifanaraka amin'ny S3. Apache Spark dia ahafahanao mandefa angon-drakitra avy amin'ny loharano ivelany na fitahirizana Ceph S3 naorina, ary mamela anao hanao fanovana data mialoha ihany koa. Apache Kafka dia manome fitantanana avo lenta amin'ny fantsona angon-drakitra (izay ahafahan'ny angon-drakitra entina imbetsaka, ary koa ny fiovan'ny angona, ny fanadihadiana ary ny fikirizana).
Noho izany, ny mpandinika angona dia niditra tamin'ny angon-drakitra ary nanangana modely. Ankehitriny dia manana faniriana hizara ny vokatra azo amin'ny mpiara-miasa na mpamorona fampiharana izy, ary hanome azy ireo ny maodely momba ny fitsipiky ny serivisy. Mitaky mpizara inference izany, ary manana mpizara toy izany ny Open Data Hub, antsoina hoe Seldon ary mamela anao hamoaka ny modely ho serivisy RESTful.
Amin'ny fotoana iray dia misy modely maro toy izany ao amin'ny mpizara Seldon, ary ilaina ny manara-maso ny fomba ampiasana azy ireo. Mba hanatratrarana izany, ny Open Data Hub dia manolotra fitambarana metrika mifandraika sy maotera mitatitra mifototra amin'ny fitaovana fanaraha-maso loharano misokatra be mpampiasa Prometheus sy Grafana. Vokatr'izany dia mahazo valiny izahay hanaraha-maso ny fampiasana modely AI, indrindra amin'ny tontolo famokarana.
Amin'izany fomba izany, ny Open Data Hub dia manome fomba fiasa mitovitovy amin'ny rahona manerana ny tsingerin'ny AI/ML manontolo, manomboka amin'ny fidirana angon-drakitra sy ny fanomanana ny fanofanana sy ny famokarana modely.
Ampifamadiho izany rehetra izany
Mipetraka izao ny fanontaniana hoe ahoana no fomba handaminana izany rehetra izany ho an'ny mpitantana OpenShift. Ary eto no misy mpandraharaha Kubernetes manokana ho an'ny tetikasa Open Data Hub.
Ity mpandraharaha ity dia mitantana ny fametrahana, ny fanamafisana ary ny tsingerin'ny fiainan'ny tetikasa Open Data Hub, anisan'izany ny fametrahana ireo fitaovana voalaza etsy ambony toy ny JupyterHub, Ceph, Spark, Kafka, Seldon, Prometheus ary Grafana. Ny tetikasa Open Data Hub dia azo jerena ao amin'ny console web OpenShift, ao amin'ny sehatry ny mpandraharaha vondrom-piarahamonina. Noho izany, ny mpandrindra OpenShift dia afaka mamaritra fa ny tetikasa OpenShift mifanaraka amin'izany dia sokajiana ho "Tetikasa Open Data Hub". Izany dia atao indray mandeha. Aorian'izany dia miditra ao amin'ny habaka tetikasany amin'ny alΓ lan'ny fampiononana tranonkala OpenShift ilay mpandinika angona ary mahita fa napetraka sy azo alaina amin'ny tetikasany ny mpandraharaha Kubernetes mifanaraka amin'izany. Avy eo izy dia mamorona ohatry ny tetikasa Open Data Hub miaraka amin'ny tsindry iray ary mahazo miditra avy hatrany amin'ireo fitaovana voalaza etsy ambony. Ary izany rehetra izany dia azo amboarina amin'ny fomba fandeferana avo lenta sy fandeferana.
Raha te hanandrana ny tetikasa Open Data Hub ho anao ianao dia atombohy amin'ny . Ny antsipiriany ara-teknika momba ny rafitra Open Data Hub dia azo jerena , drafitra fampandrosoana tetikasa - . Amin'ny ho avy, mikasa ny hampihatra fampidirana fanampiny miaraka amin'i Kubeflow izahay, hamaha olana maromaro momba ny fanaraha-maso sy ny fiarovana ny angon-drakitra, ary handamina ny fampidirana miaraka amin'ireo rafitra mifototra amin'ny fitsipika Drools sy Optaplanner. Asehoy ny hevitrao ary lasa mpandray anjara amin'ny tetikasa mety amin'ny pejy .
Raha fintinina: Ny fanamby lehibe amin'ny fampitomboana dia manakana ny fikambanana tsy hahatsapa ny mety ho vitan'ny faharanitan-tsaina artifisialy sy ny fianarana milina. Red Hat OpenShift dia efa ela no nahomby tamin'ny famahana olana mitovitovy amin'ny indostrian'ny rindrambaiko. Ny tetikasa Open Data Hub, napetraka ao anatin'ny vondrom-piarahamonina fampivoarana loharano misokatra, dia manolotra maritrano reference ho an'ny fikarakarana tsingerina feno amin'ny asa AI/ML mifototra amin'ny rahona hybrid OpenShift. Manana drafitra mazava sy voahevitra izahay amin'ny fampivoarana ity tetikasa ity, ary matotra amin'ny famoronana vondrom-piarahamonina mavitrika sy mahavokatra manodidina azy izahay amin'ny famolavolana vahaolana AI misokatra amin'ny sehatra OpenShift.
Source: www.habr.com