Khoutu ea mohloli oa sistimi ea ho ithuta ea mochini oa PIXIE e buletsoe, e u lumellang hore u thehe mefuta ea 3D le li-avatar tsa 'mele oa motho ho tsoa fotong e le' ngoe. Liaparo tsa 'nete tsa sefahleho le liaparo tse fapaneng le tse bontšitsoeng fotong ea mantlha li ka hokelloa ho mofuta o hlahisitsoeng. Sistimi e ka sebelisoa, mohlala, ho fana ka sebaka se fapaneng sa pono, ho etsa lipopae, ho aha 'mele bocha ho latela sebopeho sa sefahleho, le ho hlahisa mohlala oa 3D oa menoana. Khoutu e ngotsoe ka Python ho sebelisoa moralo oa Pytorch mme e ajoa tlas'a laesense ea tšebeliso e seng ea khoebo feela.
Ho boleloa hore, ha ho bapisoa le merero e tšoanang, PIXIE e u lumella ho tsosolosa ka mokhoa o nepahetseng likarolo tsa 'mele, tseo qalong li neng li patiloe ke liaparo tse setšoantšong, sebopeho sa sefahleho le boemo ba manonyeletso a matsoho. Mokhoa ona o ipapisitse le ts'ebeliso ea marang-rang a neural, a ntšang likarolo tsa sefahleho, 'mele le matsoho ho tsoa setšoantšong sa pixel. Mosebetsi oa marang-rang oa neural o hokahanngoa ke molaoli ea khethehileng, eo, ho itšetlehile ka tlhahlobo ea khanya, e eketsang tlhahisoleseding e mabapi le li-coefficients tse boima tsa likarolo tse fapaneng tsa 'mele ho thibela ho fumanoa ha maemo a sa tloaelehang. Ha ho etsoa mohlala, liphapang tsa anatomical pakeng tsa 'mele oa monna le mosali, maemo a boemo, mabone, ponahalo ea holim'a metsi le ho potoloha ha sefahleho ka sefofane se nang le likarolo tse tharo li nkoa.
Likarolo tsa PIXIE:
- Mokhoa o tsosolositsoeng oa 'mele oa 3D, hammoho le tlhahisoleseding e mabapi le boemo, boemo ba matsoho le ponahalo ea sefahleho, e bolokiloe e le sete sa li-parameter tsa SMPL-X, tse ka sebelisoang hamorao tsamaisong ea mohlala ea Blender ka plugin.
- Ho tloha setšoantšong, lintlha tse qaqileng li khethoa ka sebōpeho le ponahalo ea sefahleho, hammoho le likarolo tsa eona, tse kang ho ba teng ha wrinkles (mochine oa ho ithuta oa mochine oa DECA, o entsoeng ke bangoli ba tšoanang, o sebelisetsoa ho haha mohlala oa hlooho) .
- Ha ho hlahisoa sebopeho sa sefahleho, albedo ea ntho e hakanngoa.
- Mofuta oa 'mele o entsoeng o ka phetoa kapa oa hlahisoa ka mokhoa o fapaneng.
- Tšehetso ea ho haha mohlala ho tsoa litšoantšong tse tloaelehileng tsa motho ea maemong a tlhaho. PIXIE e etsa mosebetsi o motle oa ho lemoha maemo a fapaneng, maemo a mabone, le ho sitisa ponahalo ea likarolo tsa ntho.
- Ts'ebetso e phahameng, e loketseng ts'ebetso e matla ea litšoantšo tsa khamera.
Source: opennet.ru