PIfu tsarin koyon inji ne don gina samfurin 3D na mutum dangane da hotunan 2D

Kungiyar masu bincike daga jami'o'in Amurka da dama sun buga wani aiki PIFu (Pixel-Aligned Implicit Action), wanda ke ba ku damar amfani da hanyoyin koyo na inji don gina samfurin 3D na mutum daga ɗaya ko fiye da hotuna masu girma biyu. Tsarin yana ba ku damar sake ƙirƙirar zaɓuɓɓukan tufafi masu rikitarwa, kamar suttattun siket da sheqa, da salon gyara gashi daban-daban, maido da rubutu da siffa daban-daban a cikin wuraren da ba a iya gani a cikin tsinkaya daga abin da aka gina ƙirar 3D. Don haɓaka inganci da dalla-dalla na samfurin 3D na ƙarshe, ana iya amfani da hotuna da yawa daga kusurwoyi daban-daban. An rubuta lambar aikin a cikin Python ta amfani da tsarin PyTorch da rarraba ta karkashin lasisin MIT.

PIfu – tsarin koyon inji don gina samfurin 3D na mutum dangane da hotunan 2D

Ana amfani da hanyar sadarwa ta jijiyoyi azaman tushe don sake gina shimfidar wuri mai girma uku, wanda ke ba ka damar zaɓar mafi yuwuwar siffa da ƙirƙira abubuwan ɓoye, farawa daga ƙirar da aka horar akan nau'ikan abubuwan da ke akwai. A cikin layi daya, aikin yana ba da algorithm don dacewa da sakamakon ƙima mai girma tare da laushi a cikin hotuna na 2D da aka bayar, wanda ya daidaita pixels na hoton 3D bisa ga matsayinsu a kan abu na XNUMXD kuma ya haifar da mafi kusantar rashin laushi. Ana iya shigar da kowane hoto convolutional jijiya cibiyar sadarwadon
aikin gine-ginen sake ginawaGilashin sa'a da aka tara", ba a
Ana amfani da cibiyar sadarwar jijiya ta tushen gine-gine don daidaita rubutu CycleGAN.

PIfu – tsarin koyon inji don gina samfurin 3D na mutum dangane da hotunan 2D

Samfurin horar da shirye-shiryen da masu binciken ke amfani da su akwai yana samuwa don saukewa kyauta, amma danyen bayanan da aka yi amfani da shi don horarwa ya kasance mai zaman kansa saboda yana dogara ne akan sikanin 3D na kasuwanci. Ana iya amfani dashi azaman tushen horon kai na samfurin 3D model database mutane daga aikin Renderpeople.

source: budenet.ru

Add a comment