Chaidh còd siostam ionnsachaidh inneal airson gluasadan daonna reusanta a ghineadh fhosgladh

Tha sgioba de luchd-rannsachaidh bho Oilthigh Tel Aviv air an còd tùsail fhosgladh co-cheangailte ris an t-siostam ionnsachaidh inneal MDM (Motion Diffusion Model), a leigeas le gluasadan daonna reusanta a ghineadh. Tha an còd air a sgrìobhadh ann am Python a’ cleachdadh frèam PyTorch agus air a chuairteachadh fo chead MIT. Gus deuchainnean a dhèanamh, faodaidh tu an dà chuid modalan deiseil a chleachdadh agus na modalan agad fhèin a thrèanadh a ’cleachdadh na sgriobtaichean a chaidh a mholadh, mar eisimpleir, a’ cleachdadh cruinneachadh HumanML3D de dhealbhan daonna trì-thaobhach. Gus an siostam a thrèanadh, tha feum air GPU le taic CUDA.

Tha e duilich cleachdadh comasan traidiseanta airson gluasadan daonna a bheothachadh air sgàth nan duilgheadasan a tha co-cheangailte ris an iomadh seòrsa gluasad a dh’ fhaodadh a bhith ann agus cho duilich ‘s a tha e cunntas foirmeil a thoirt orra, a bharrachd air cho cugallach‘ s a tha tuigse dhaoine air gluasadan mì-nàdarrach. Tha duilgheadasan air a bhith aig oidhirpean roimhe gus modalan ionnsachaidh inneal ginealach a chleachdadh le càileachd agus beagan faireachdainn.

Bidh an siostam a thathar a’ moladh a’ feuchainn ri modalan sgaoilidh a chleachdadh gus gluasadan a ghineadh, a tha gu nàdarrach nas freagarraiche airson a bhith ag atharrais air gluasadan daonna, ach nach eil às aonais eas-bhuannachdan, leithid riatanasan àireamhachd àrd agus iom-fhillteachd smachd. Gus easbhaidhean mhodalan sgaoilidh a lughdachadh, bidh MDM a’ cleachdadh lìonra neural cruth-atharrachaidh agus ro-innse sampall an àite ro-innse fuaim aig gach ìre, ga dhèanamh nas fhasa casg a chuir air neo-riaghailteachdan leithid call conaltradh uachdar leis a’ chas.

Gus smachd a chumail air gineadh, tha e comasach tuairisgeul teacsa a chleachdadh air gnìomh ann an cànan nàdurrach (mar eisimpleir, “bidh neach a’ coiseachd air adhart agus a ’lùbadh sìos gus rudeigin a thogail bhon talamh”) no gnìomhan àbhaisteach leithid “ruith” agus “a chleachdadh a’ leum.” Faodar an siostam a chleachdadh cuideachd airson gluasadan a dheasachadh agus mion-fhiosrachadh caillte a lìonadh. Rinn an luchd-rannsachaidh deuchainn anns an deach iarraidh air com-pàirtichean toradh nas fheàrr a thaghadh bho ghrunn roghainnean - ann an 42% de chùisean, b’ fheàrr le daoine gluasadan synthesized seach fìor.



Source: fosgailtenet.ru

Cuir beachd ann