E wehe i ke code no ka hoʻohui ʻana i ka animation me ka hoʻohana ʻana i nā pūnaewele neural

He pūʻulu o nā mea noiʻi mai Shanghai Technical University paʻi ʻia mea paahana Impersonator, ka mea e hiki ai i ka hoʻohana ʻana i nā ʻano hana aʻo mīkini e hoʻohālikelike i ka neʻe ʻana o nā kānaka me ka hoʻohana ʻana i nā kiʻi static, a me ka hoʻololi ʻana i nā lole, e hoʻololi iā lākou i kahi ʻē aʻe a hoʻololi i ke kihi e ʻike ʻia ai kahi mea. Ua kākau ʻia ke code ma Python
me ka hoʻohana ʻana i kahi pā ʻO PyTorch. Pono pū ka hui kukui kukui a me CUDA Toolkit.

Loaʻa i ka pahu hana he kiʻi ʻelua-dimensional ma ke ʻano he hoʻokomo a synthesize i kahi hopena i hoʻololi ʻia ma muli o ke kumu hoʻohālike i koho ʻia. Kākoʻo ʻia ʻekolu mau koho hoʻololi:
Ke hana ʻana i kahi mea neʻe e hahai ana i nā neʻe i hoʻomaʻamaʻa ʻia ke kumu hoʻohālike. Ka hoʻololi ʻana i nā mea o ka hiʻohiʻona mai kahi kumu hoʻohālike i kahi mea (e laʻa, hoʻololi i ka lole). Ka hana ʻana i kahi kihi hou (no ka laʻana, synthesis o kahi kiʻi ʻaoʻao e pili ana i ke kiʻi piha piha). Hiki ke hoʻohui ʻia nā ʻano ʻekolu a pau, no ka laʻana, hiki iā ʻoe ke hana i kahi wikiō mai kahi kiʻi e hoʻohālikelike ana i ka hana o kahi hoʻopunipuni acrobatic paʻakikī i nā lole like ʻole.

I ka wā o ke kaʻina hana synthesis, hana ʻia nā hana o ke koho ʻana i kahi mea i loko o ke kiʻi a me ka hoʻokumu ʻana i nā mea hope i nalowale i ka wā e neʻe ai. Hiki ke hoʻomaʻamaʻa ʻia ke kumu hoʻohālike neural network a hoʻohana ʻia no nā loli like ʻole. No ka hoouka ana loaʻa nā hiʻohiʻona i hoʻomākaukau ʻia e ʻae iā ʻoe e hoʻohana koke i nā mea hana me ka ʻole o ka hoʻomaʻamaʻa mua ʻana. Pono ka GPU me ka nui hoʻomanaʻo o ka liʻiliʻi he 8GB e hana.

ʻAʻole like me nā ʻano hoʻololi e pili ana i ka hoʻololi ʻana e nā kikoʻī koʻikoʻi e wehewehe ana i kahi o ke kino ma kahi ākea ʻelua, hoʻāʻo ʻo Impersonator e synthesize i kahi mesh ʻekolu-dimensional me ka wehewehe ʻana o ke kino me ka hoʻohana ʻana i nā ʻano aʻo mīkini.
ʻO ke ala i manaʻo ʻia e hiki ai i nā manipulations e noʻonoʻo i ke ʻano o ke kino pilikino a me ke ʻano o kēia manawa, e hoʻohālikelike ana i nā neʻe kūlohelohe o nā lālā.

No ka mālama ʻana i ka ʻike kumu e like me ke ʻano, ke ʻano, nā kala a me ka ʻike maka i ka wā o ka hoʻololi ʻana, generative adversarial neural network (ʻO ka wai wai GAN). Lawe ʻia ka ʻike e pili ana i ke kumu kumu a me nā ʻāpana no kona ʻike pololei ʻana ma ka noi ʻana convolutional neural network.

Source: opennet.ru