Рамзи сарчашмаи системаи омӯзиши мошини PIXIE кушода шуд, ки ба шумо имкон медиҳад, ки аз як акс моделҳои 3D ва аватарҳои аниматсионии бадани инсон эҷод кунед. Матнҳои воқеии чеҳра ва либосро, ки аз аксҳои дар акси аслӣ тасвиршуда фарқ мекунанд, ба модели натиҷавӣ замима кардан мумкин аст. Системаро, масалан, барои намоиш додан аз нуқтаи дигар, сохтани аниматсия, аз нав сохтани бадан дар асоси шакли рӯй ва тавлиди модели 3D-и ангуштон истифода бурдан мумкин аст. Рамз дар Python бо истифода аз чаҳорчӯбаи Pytorch навишта шудааст ва таҳти иҷозатномаи танҳо барои истифодаи ғайритиҷоратӣ паҳн карда мешавад.
Гуфта мешавад, ки PIXIE дар муқоиса бо лоиҳаҳои шабеҳ ба шумо имкон медиҳад, ки контурҳои баданро, ки дар аввал бо либос дар акс, шакли чеҳра ва мавқеъи буғумҳои дастҳо пинҳон карда шудааст, дақиқтар барқарор кунед. Ин усул ба истифодаи шабакаи нейронӣ асос ёфтааст, ки параметрҳои рӯй, бадан ва дастҳоро аз тасвири пикселӣ мебарорад. Кори шабакаи нейрон аз ҷониби контролери махсус ҳамоҳанг карда мешавад, ки дар асоси таҳлили рӯшноӣ маълумотро дар бораи коэффисиентҳои вазни қисмҳои гуногуни бадан илова мекунад, то ошкор шудани позаҳои ғайритабииро истисно кунад. Ҳангоми сохтани модел фарқиятҳои анатомикии бадани мард ва зан, параметрҳои мавқеият, рӯшноӣ, инъикоси сатҳ ва гардиши рӯй дар ҳамвории сеченака ба назар гирифта мешаванд.
Хусусиятҳои PIXIE:
- Модели аз нав сохташудаи бадани 3D, инчунин маълумот дар бораи поза, мавқеи даст ва ифодаи чеҳра ҳамчун маҷмӯи параметрҳои SMPL-X захира карда мешавад, ки баъдтар онҳоро дар системаи моделсозии Blender тавассути плагин истифода бурдан мумкин аст.
- Аз акс маълумоти муфассал дар бораи шакл ва ифодаи чеҳра, инчунин хусусиятҳои он, ба монанди мавҷудияти узвҳо муайян карда мешавад (системаи омӯзиши мошини DECA, ки аз ҷониби ҳамон муаллифон таҳия шудааст, барои сохтани модели сар истифода мешавад) .
- Ҳангоми тавлиди матни рӯй, албедои объект ҳисоб карда мешавад.
- Модели бадани сохташуда метавонад баъдтар аниматсия карда шавад ё дар як ҳолати дигар пешниҳод карда шавад.
- Дастгирии сохтани модел аз аксҳои оддии шахс дар шароити табиӣ. PIXIE барои муайян кардани позаҳои гуногун, шароити рӯшноӣ ва монеъ шудан ба дидани қисмҳои ашё кори хуб мекунад.
- Иҷрои баланд, мувофиқ барои коркарди динамикии тасвирҳои камера.
Манбаъ: opennet.ru