Ṣii koodu fun iṣelọpọ ere idaraya nipa lilo awọn nẹtiwọọki nkankikan

Ẹgbẹ kan ti awọn oniwadi lati Ile-ẹkọ Imọ-ẹrọ Shanghai atejade irinṣẹ Afarawe, eyiti ngbanilaaye lilo awọn ọna ikẹkọ ẹrọ lati ṣe adaṣe awọn iṣipopada awọn eniyan nipa lilo awọn aworan aimi, bakannaa rọpo awọn aṣọ, gbe wọn lọ si agbegbe miiran ati yi igun ti eyiti ohun kan han. Awọn koodu ti kọ ni Python
lilo ilana PyTorch. Apejọ tun nilo ògùṣọ̀ ati CUDA Irinṣẹ.

Ohun elo irinṣẹ gba aworan onisẹpo meji bi titẹ sii ati ṣajọpọ abajade iyipada ti o da lori awoṣe ti o yan. Awọn aṣayan iyipada mẹta ni atilẹyin:
Ṣiṣẹda ohun gbigbe ti o tẹle awọn iṣipopada lori eyiti awoṣe ti kọ ẹkọ. Gbigbe awọn eroja ti irisi lati awoṣe si ohun kan (fun apẹẹrẹ, iyipada aṣọ). Iran ti igun tuntun (fun apẹẹrẹ, iṣelọpọ ti aworan profaili ti o da lori aworan oju-kikun). Gbogbo awọn ọna mẹta le ni idapo, fun apẹẹrẹ, o le ṣe agbejade fidio kan lati aworan kan ti o ṣe adaṣe iṣẹ ti ẹtan acrobatic eka ni awọn aṣọ oriṣiriṣi.

Lakoko ilana iṣelọpọ, awọn iṣẹ ṣiṣe ti yiyan ohun kan ninu aworan kan ati ṣiṣẹda awọn eroja isale ti o padanu nigba gbigbe ni a ṣe ni nigbakannaa. Awoṣe nẹtiwọọki nkankikan le ṣe ikẹkọ ni ẹẹkan ati lo fun ọpọlọpọ awọn iyipada. Fun ikojọpọ wa Awọn awoṣe ti a ti ṣetan ti o gba ọ laaye lati lo awọn irinṣẹ lẹsẹkẹsẹ laisi ikẹkọ alakoko. GPU kan pẹlu iwọn iranti ti o kere ju 8GB ni a nilo lati ṣiṣẹ.

Ko dabi awọn ọna iyipada ti o da lori iyipada nipasẹ awọn aaye pataki ti o n ṣalaye ipo ti ara ni aaye iwọn-meji, Impersonator ṣe igbiyanju lati ṣajọpọ mesh onisẹpo mẹta pẹlu apejuwe ti ara nipa lilo awọn ọna ikẹkọ ẹrọ.
Ọna ti a dabaa ngbanilaaye fun awọn ifọwọyi ni akiyesi apẹrẹ ara ti ara ẹni ati iduro lọwọlọwọ, ti n ṣe adaṣe awọn agbeka adayeba ti awọn ẹsẹ.

Lati tọju alaye atilẹba gẹgẹbi awọn awoara, ara, awọn awọ ati idanimọ oju lakoko ilana iyipada, generative adversarial nkankikan nẹtiwọki (Liquid Warping GAN). Alaye nipa ohun orisun ati awọn paramita fun idanimọ kongẹ rẹ jẹ jade nipasẹ lilo convolutional nkankikan nẹtiwọki.

orisun: opennet.ru