Awọn koodu orisun ti eto ẹkọ ẹrọ PIXIE ti ṣii, gbigba ọ laaye lati ṣẹda awọn awoṣe 3D ati awọn avatars ere idaraya ti ara eniyan lati fọto kan. Oju oju gidi ati awọn awoara aṣọ ti o yatọ si awọn ti a fihan ninu aworan atilẹba ni a le so mọ awoṣe abajade. Awọn eto le ṣee lo, fun apẹẹrẹ, lati mu lati kan yatọ si vantage ojuami, ṣẹda iwara, atunkọ awọn ara da lori awọn apẹrẹ ti awọn oju, ati ina a 3D awoṣe ti awọn ika. Awọn koodu ti wa ni kikọ ni Python lilo awọn Pytorch ilana ati ti wa ni pin labẹ a ti kii-owo ti lilo nikan iwe-ašẹ.
O ti sọ pe, ni akawe si awọn iṣẹ akanṣe ti o jọra, PIXIE ngbanilaaye lati ṣe deede ni deede tun awọn oju-ara ti ara, ni ibẹrẹ ti o farapamọ nipasẹ aṣọ ni aworan, apẹrẹ oju ati ipo awọn isẹpo ọwọ. Ọna naa da lori lilo nẹtiwọọki nkankikan, eyiti o yọkuro awọn aye ti oju, ara ati ọwọ lati aworan ẹbun kan. Iṣẹ ti nẹtiwọọki nkankikan jẹ ipoidojuko nipasẹ olutọsọna pataki kan, eyiti, da lori itupalẹ itanna, ṣafikun alaye nipa awọn iwọn wiwọn ti awọn ẹya pupọ ti ara lati yọkuro wiwa awọn ipo atubotan. Nigbati o ba ṣẹda awoṣe, awọn iyatọ anatomical laarin ara ọkunrin ati obinrin, awọn aye iduro, ina, irisi dada ati yiyi oju oju ni ọkọ ofurufu onisẹpo mẹta ni a ṣe akiyesi.
Awọn ẹya ara ẹrọ ti PIXIE:
- Awoṣe ara 3D ti a tun ṣe, ati alaye nipa iduro, ipo ọwọ ati ikosile oju, ti wa ni fipamọ bi ṣeto ti awọn aye SMPL-X, eyiti o le ṣee lo nigbamii ni eto awoṣe Blender nipasẹ ohun itanna kan.
- Lati aworan naa, alaye alaye ti pinnu nipa apẹrẹ ati ikosile ti oju, bakanna bi awọn ẹya ara ẹrọ, gẹgẹbi wiwa awọn wrinkles (eto ẹrọ DECA, ti o ni idagbasoke nipasẹ awọn onkọwe kanna, ni a lo lati kọ awoṣe ori) .
- Nigbati o ba n ṣe ipilẹṣẹ oju oju, albedo ti nkan naa jẹ ifoju.
- Awoṣe ara ti a ṣe le nigbamii ti ere idaraya tabi gbekalẹ ni ipo ti o yatọ.
- Atilẹyin fun kikọ awoṣe lati awọn fọto lasan ti eniyan ni awọn ipo adayeba. PIXIE ṣe iṣẹ ti o dara ti wiwa awọn ipo oriṣiriṣi, awọn ipo ina, ati idilọwọ hihan awọn apakan ti ohun kan.
- Išẹ giga, o dara fun sisẹ agbara ti awọn aworan kamẹra.
orisun: opennet.ru