Navorsingspan van Sjanghai Tegniese Universiteit
die raamwerk gebruik
Die gereedskapstel neem 'n XNUMXD-beeld as invoer en sintetiseer 'n gewysigde resultaat gebaseer op die geselekteerde model. Drie transformasie-opsies word ondersteun:
Die skep van 'n bewegende voorwerp wat die bewegings herhaal waarop die model geoefen is. Die oordrag van voorkomselemente van die model na die voorwerp (byvoorbeeld om klere te verander). Generering van 'n nuwe hoek (byvoorbeeld, sintetisering van 'n beeld in profiel gebaseer op 'n frontale foto). Al drie metodes kan gekombineer word, byvoorbeeld, dit is moontlik om 'n video van 'n foto te genereer wat die uitvoering van 'n komplekse akrobatiese stunt in verskillende klere naboots.
In die proses van sintese word die bewerkings om 'n voorwerp in 'n foto te kies en die ontbrekende elemente van die agtergrond te vorm wanneer dit beweeg gelyktydig uitgevoer. 'n Model vir 'n neurale netwerk kan een keer opgelei word en vir verskeie transformasies gebruik word. Vir laai
Anders as transformasiemetodes gebaseer op transformasie deur sleutelpunte wat die ligging van die liggaam in tweedimensionele ruimte beskryf, poog Impersonator om 'n driedimensionele mesh (mesh) te sintetiseer met 'n beskrywing van die liggaam deur masjienleermetodes te gebruik.
Die voorgestelde metode laat manipulasies toe met inagneming van die persoonlike vorm van die liggaam en die huidige postuur, wat die natuurlike bewegings van die ledemate simuleer.
Om die oorspronklike inligting, soos teksture, styl, kleure en gesigherkenning te bewaar, gebruik die transformasieproses
Bron: opennet.ru