Is e siostam ionnsachaidh inneal a th’ ann am PIFu airson modal 3D de dhuine a thogail stèidhichte air dealbhan 2D

Dh'fhoillsich buidheann de luchd-rannsachaidh bho ghrunn oilthighean Ameireaganach pròiseact PIFu (Gnìomh Inntinn Pixel-Aligned), a leigeas leat dòighean ionnsachaidh inneal a chuir an sàs gus modal 3D de dhuine a thogail bho aon no barrachd ìomhaighean dà-mheudach. Leigidh an siostam leat roghainnean aodach iom-fhillte ath-chruthachadh, leithid sgiortaichean pleated agus sàilean, agus diofar stoidhlichean fuilt, gu neo-eisimeileach ag ath-nuadhachadh inneach agus cumadh ann an raointean nach fhaicear san ro-mheasadh às a bheil am modail 3D air a thogail. Gus càileachd agus mion-fhiosrachadh a’ mhodail 3D mu dheireadh a mheudachadh, faodar grunn ìomhaighean bho dhiofar cheàrnan a chleachdadh. Tha còd a’ phròiseict air a sgrìobhadh ann am Python a’ cleachdadh frèam PyTorch agus air a sgaoileadh le fo chead MIT.

PIFu - siostam ionnsachaidh inneal airson modal 3D de dhuine a thogail stèidhichte air dealbhan 2D

Tha lìonra neural air a chleachdadh mar stòr airson cruth trì-thaobhach ath-chruthachadh, a leigeas leat an cumadh as coltaiche a thaghadh agus eileamaidean falaichte a chruthachadh, a’ tòiseachadh bho mhodail air a thrèanadh air diofar dhreachan de nithean a th’ ann mar-thà. Aig an aon àm, tha am pròiseact a’ toirt seachad algorithm airson a bhith a’ maidseadh an cruth tomhas-lìonaidh mar thoradh air sin le inneach anns na h-ìomhaighean 2D a chaidh a thoirt seachad, a tha a’ co-thaobhadh piogsail na h-ìomhaigh 3D a rèir an t-suidheachaidh air an nì XNUMXD agus a ghineas na h-inneach as coltaiche a tha a dhìth. Faodar ìomhaigh sam bith a chòdachadh lìonra neural convolutionalairson
ath-thogail uachdar ailtireachd gnìomhaichte "Glas-uair air a chruachadh", a
Tha lìonra neural stèidhichte air ailtireachd air a chleachdadh airson maidseadh inneach RothaireachdGAN.

PIFu - siostam ionnsachaidh inneal airson modal 3D de dhuine a thogail stèidhichte air dealbhan 2D

Am modal trèanaidh deiseil a chleachd an luchd-rannsachaidh доступна ri fhaighinn airson luchdachadh a-nuas an-asgaidh, ach tha an dàta amh a thathar a’ cleachdadh airson trèanadh fhathast prìobhaideach leis gu bheil e stèidhichte air sganaidhean malairteach 3D. Faodar a chleachdadh mar stòr airson fèin-thrèanadh a 'mhodail Stòr-dàta mhodail 3d a daoine bhon phròiseact Renderpeople.

Source: fosgailtenet.ru

Cuir beachd ann