Ko te kaupapa Open Data Hub he papaa ako miihini tuwhera i runga i te Red Hat OpenShift

Kua tae mai nga wa kei te heke mai, a kua oti kee te whakamahi i nga hangarau mohio me nga hangarau ako miihini e o toa tino pai, kamupene kawe waka tae atu ki nga paamu korukoru.

A, ki te mea he mea kei te noho, he mea ano kei runga ipurangi... he kaupapa tuwhera! Tirohia me pehea e awhina ai a Tuwhera Raraunga Raraunga ki a koe i nga hangarau hou me te karo i nga wero whakatinanatanga.

Na nga painga katoa o te mohiotanga horihori (AI) me te ako miihini (ML), he uaua tonu nga whakahaere ki te whakatikatika i enei hangarau. Ko nga raru nui i tenei keehi ko nga mea e whai ake nei:

• Te whakawhiti korero me te mahi tahi – tata e kore e taea te whakawhiti korero ma te ngawari me te mahi tahi i roto i nga huringa tere.
• Te urunga raraunga – mo ia mahi me hanga hou me te mahi a-ringa, he roa te waa.
• Te uru i runga i te tono – karekau he huarahi ki te uru i runga i te tono ki nga taputapu ako miihini me te papaaho, tae atu ki nga hanganga rorohiko.
• Whakaputa – ka noho tonu nga tauira ki te waahi tauira, kaore e kawea ki nga mahi ahumahi.
• Aroturuki me te whakamarama i nga hua AI - he uaua te whakaputa, te whai me te whakamarama o nga hua AI/ML.

Ki te kore e whakatauhia, ka pa kino enei raru ki te tere, te pai, me te hua o nga kaiputaiao raraunga utu nui. Na tenei ka pa ki a ratau te pouri, te pouri i roto i a raatau mahi, na reira ka ngaro nga tumanako pakihi mo AI/ML.

Ko te kawenga mo te whakaoti i enei raru kei runga i nga tohunga IT, me whakarato ki nga kaitätari raraunga - he tika, he rite ki te kapua. I roto i nga korero taipitopito, ka hiahia matou ki tetahi papaahi e whai waahi ana ki te whiriwhiri me te waatea, ngawari te uru. I te wa ano, he tere, he ngawari ki te whirihora ano, ka taea te whakarereke i runga i te tono me te aukati ki nga rahunga. Ko te hanga i taua turanga i runga i nga hangarau puna tuwhera ka awhina i te aukati i nga kaihoko me te pupuri i te painga rautaki mo te wa roa mo te whakahaere utu.

I etahi tau kua pahure ake nei, he rite ano te ahua i roto i te whakawhanaketanga tono me te puta mai o nga ratonga miihini, nga kapua ranu, IT automation, me nga mahi agile. Hei whakatutuki i enei mea katoa, kua huri nga tohunga ngaio IT ki nga ipu, Kubernetes me nga kapua ranu tuwhera.

Kei te whakamahia tenei wheako ki te whakautu i nga wero a Al. Koia te take kei te hanga nga tohunga ngaio IT i nga papaa-a-waa, ka taea te hanga i nga ratonga AI/ML i roto i nga mahi agile, ka whakatere i nga mahi auaha, ka hangaia ma te titiro ki te kapua ranu.

Ka timata taatau ki te hanga i taua papaaarangi me te Red Hat OpenShift, ta maatau papaa Kubernetes mo te kapua ranu, kei te tere te tipu o te rauwiringa kaiao o nga raupaparorohiko me nga taputapu rongoa ML (NVIDIA, H2O.ai, Starburst, PerceptiLabs, etc.). Ko etahi o nga kaihoko a Red Hat, penei i a BMW Group, ExxonMobil me etahi atu, kua tukuna kee nga mekameka taputapu ML me nga tukanga DevOps ki runga ake o te papaaho me tana puunaha rauwiringa kaiao ki te kawe mai i a raatau hoahoanga ML ki te whakaputa me te tere ake i nga mahi a nga kaitirotiro raraunga.

Ko tetahi atu take i whakarewahia e matou te kaupapa Open Data Hub he whakaatu i tetahi tauira o te hoahoanga i runga i te maha o nga kaupapa rorohiko tuwhera me te whakaatu me pehea te whakatinana i te huringa ora katoa o te otinga ML i runga i te papaaho OpenShift.

Whakatuwhera Kaupapa Raraunga Raraunga

He kaupapa puna tuwhera tenei ka whakawhanakehia i roto i te hapori whanaketanga e rite ana me te whakatinana i te huringa katoa o nga mahi - mai i te uta me te huri i nga raraunga tuatahi ki te whakaputa, whakangungu me te pupuri tauira - i te wa e whakaoti rapanga AI / ML ma te whakamahi ipu me nga Kubernetes i runga i te OpenShift tūāpapa. Ko tenei kaupapa ka taea te whakaaro he whakatinanatanga tohutoro, he tauira mo te hanga i tetahi otinga AI / ML-as-a-ratonga tuwhera i runga i OpenShift me nga taputapu puna tuwhera e pa ana ki a Tensorflow, JupyterHub, Spark me etahi atu. He mea nui kia mohio kei te whakamahi a Red Hat i tenei kaupapa ki te whakarato i ana ratonga AI/ML. I tua atu, ka whakauru a OpenShift ki nga raupaparorohiko matua me nga otinga ML taputapu mai i NVIDIA, Seldon, Starbust me etahi atu kaihoko, kia maamaa ake te hanga me te whakahaere i o ake punaha ako miihini.

Ko te kaupapa Open Data Hub e arotahi ana ki nga waahanga e whai ake nei o nga kaiwhakamahi me nga keehi whakamahi:

• Kaitātari Raraunga e hiahia ana he otinga mo te whakatinana i nga kaupapa ML, kua whakaritea ano he kapua me nga mahi mahi-whaiaro.
• Kaitātari Raraunga e hiahia ana ki te kowhiringa mai i nga taputapu AI/ML puna tuwhera hou me nga papaahi.
• Kaitātari Raraunga e hiahia ana ki te uru ki nga puna raraunga ina whakangungu tauira.
• Kaitātari raraunga e hiahia ana ki te uru atu ki nga rauemi rorohiko (CPU, GPU, mahara).
• Kaitātari Raraunga e hiahia ana ki te mahi tahi me te tiri mahi me o hoa mahi, te whiwhi urupare, me te whakapai ake i te tere tere.
• He kaitātari raraunga e hiahia ana ki te taunekeneke me nga kaiwhakawhanake (me nga kapa devops) kia uru ana tauira ML me ana hua mahi ki te whakaputa.
• Kaihanga Raraunga e hiahia ana ki te whai waahi ki tetahi kaitätari raraunga ki nga momo puna raraunga i te wa e whai ana ki nga whakaritenga ture me te haumaru.
• Kaiwhakahaere/kaiwhakahaere punaha IT e hiahia ana kia kaha ki te whakahaere i te huringa ora (te whakaurunga, te whirihoranga, te whakamohoatanga) o nga waahanga puna tuwhera me nga hangarau. Kei te hiahia hoki matou ki nga taputapu whakahaere tika me te motunga.

Ko te kaupapa Open Data Hub he whakakotahi i te whānuitanga o nga taputapu puna tuwhera hei whakatinana i te huringa katoa o nga mahi AI/ML. Ko Jupyter Notebook ka whakamahia i konei hei taputapu mahi matua mo te tātari raraunga. Kei te rongonui te kete taputapu i waenga i nga kaiputaiao raraunga i enei ra, a ka taea e te Open Data Hub te hanga ngawari me te whakahaere i nga mokowāmahi Pukatuhi Jupyter ma te whakamahi i te JupyterHub i hangaia. I tua atu i te hanga me te kawemai i nga pukapuka pukapuka Jupyter, kei roto ano i te kaupapa Open Data Hub he maha o nga pukapuka kua rite i te ahua o te AI Library.

Ko tenei whare pukapuka he kohinga o nga waahanga ako miihini tuwhera-puna me nga otinga mo nga ahuatanga noa e ngawari ana te mahi tauira tere. Kua whakauruhia a JupyterHub ki te tauira uru RBAC a OpenShift, e taea ai e koe te whakamahi i nga kaute OpenShift o naianei me te whakauru i te hainatanga kotahi. I tua atu, ka tukuna e JupyterHub he atanga-kaiwhakamahi e kiia ana ko te spawner, ma te kaiwhakamahi ka taea te whirihora i te nui o nga rauemi rorohiko (CPU cores, memory, GPU) mo te Jupyter Notebook kua tohua.

I muri i te hanga me te whirihora e te kai-atari raraunga i te pona, ko era atu awangawanga katoa e pa ana ki a ia ka maatakihia e te Kubernetes scheduler, he waahanga o OpenShift. Ka taea e nga kaiwhakamahi anake te whakahaere i a raatau whakamatautau, tiaki me te tiri i nga hua o a raatau mahi. I tua atu, ka taea e nga kaiwhakamahi matatau te uru tika ki te anga OpenShift CLI mai i nga pukatuhi Jupyter ki te whakamahi i nga tikanga o mua o Kubernetes penei i a Job, OpenShift ranei, penei i a Tekton, Knative ranei. Mo tenei ranei ka taea e koe te whakamahi i te GUI watea a OpenShift, e kiia nei ko "OpenShift papatohu tukutuku".

Ka neke atu ki te waahanga e whai ake nei, ka taea e Open Data Hub te whakahaere i nga paipa raraunga. Mo tenei, ka whakamahia he ahanoa Ceph, e whakaratohia ana hei rokiroki raraunga ahanoa S3-hototahi. Ma te Apache Spark ka taea e koe te rere raraunga mai i nga puna o waho, te rokiroki Ceph S3 ranei i hangaia, ka taea hoki e koe te mahi i nga huringa raraunga tuatahi. Ka whakarato a Apache Kafka i te whakahaere matatau o nga raina paipa raraunga (ka taea te uta i nga raraunga i nga wa maha, me te whakarereketanga raraunga, te tātari, me nga mahi tohe).

Na, ka uru atu te kaitirotiro raraunga ki nga raraunga ka hangaia he tauira. Inaianei kei a ia te hiahia ki te whakapuaki i nga hua ka puta ki nga hoa mahi, ki nga kaihanga tono ranei, me te whakarato ki a ratou tana tauira mo nga kaupapa o te ratonga. Me whai tūmau whakatau, ā, kei a Open Data Hub he tūmau pera, ka kiia ko Seldon ka taea e koe te whakaputa i te tauira hei ratonga RESTful.

I etahi wa, he maha nga tauira penei i runga i te tūmau Seldon, me te aro turuki me pehea te whakamahi. Hei whakatutuki i tenei, ko te Tari Tuwhera Raraunga e tuku ana he kohinga inenga e tika ana me te miihini korero e pa ana ki nga taputapu aroturuki puna tuwhera whanui Prometheus me Grafana. Ko te mutunga, ka whiwhi urupare ki te aro turuki i te whakamahinga o nga tauira AI, ina koa i roto i te taiao whakaputa.

Ma tenei huarahi, ka whakaratohia e Open Data Hub he huarahi ahua-kapua puta noa i te huringa ora AI/ML katoa, mai i te urunga raraunga me te whakarite ki te whakangungu tauira me te whakaputa.

Te tukuna katoa

Inaianei ka puta te patai me pehea te whakarite i enei mea katoa mo te kaiwhakahaere OpenShift. Na konei ka uru mai tetahi kaiwhakahaere Kubernetes motuhake mo nga kaupapa Open Data Hub.

Ko tenei kaiwhakahaere e whakahaere ana i te whakaurunga, te whirihoranga me te huringa ora o te kaupapa Open Data Hub, tae atu ki te tukunga o nga taputapu kua kiia ake nei penei i a JupyterHub, Ceph, Spark, Kafka, Seldon, Prometheus me Grafana. Ka kitea te kaupapa Open Data Hub i roto i te papatohu tukutuku OpenShift, i te wahanga o nga kaiwhakahaere hapori. No reira, ka taea e te kaiwhakahaere OpenShift te tohu ko nga kaupapa OpenShift e rite ana ka whakarōpūhia hei "Tumahi Hub Raraunga Tuwhera". Kotahi te mahi. Whai muri i tenei, ka uru te kaitirotiro raraunga ki tana waahi kaupapa ma te papatohu paetukutuku OpenShift ka kite kua whakauruhia te kaiwhakahaere Kubernetes e tika ana, e waatea ana mo ana kaupapa. Ka waihangahia e ia he tauira kaupapa Open Data Hub me te paato kotahi, ka uru tonu ki nga taputapu kua whakaahuatia i runga ake nei. A ka taea te whirihora i enei mea katoa i roto i te waatea nui me te aratau whakaraerae he.

Mena kei te pirangi koe ki te whakamatau i te kaupapa Open Data Hub maau ake, timata mai nga tohutohu whakaurunga me nga akoranga whakataki. Ka kitea nga korero hangarau mo te hoahoanga Open Data Hub konei, mahere whanaketanga kaupapa - konei. I te wa kei te heke mai, ka whakamahere matou ki te whakauru atu ki a Kubeflow, ki te whakatau i te maha o nga take e pa ana ki te ture me te haumarutanga raraunga, me te whakarite hoki i te whakauru ki nga punaha ture-a-ture Drools me Optaplanner. Whakaatuhia to whakaaro ka uru mai ki te kaupapa Whakatuwherahia te Tari Raraunga taea i runga i te wharangi hapori.

Hei whakahoki korero: Ko nga wero nui kei te aukati i nga whakahaere ki te mohio ki te tino kaha o te matauranga mohio me te ako miihini. Ko te Red Hat OpenShift kua roa te whakamahi angitu ki te whakaoti rapanga rite ki te umanga rorohiko. Ko te kaupapa Open Data Hub, i whakatinanahia i roto i te hapori whanaketanga puna tuwhera, e tuku ana i te hoahoanga tohutoro mo te whakarite i te huringa katoa o nga mahi AI/ML i runga i te kapua ranu OpenShift. He mahere marama me te whakaaro nui ta matou mo te whanaketanga o tenei kaupapa, a kei te tino whakaaro matou ki te hanga i tetahi hapori kaha me te whai hua huri noa mo te whakawhanake i nga otinga AI tuwhera i runga i te papaaho OpenShift.

Source: will.com