En gruppe forskere fra Shanghai Technical University
ved hjelp av et rammeverk
Verktøysettet mottar et todimensjonalt bilde som input og syntetiserer et modifisert resultat basert på den valgte modellen. Tre transformasjonsalternativer støttes:
Lage et objekt i bevegelse som følger bevegelsene som modellen ble trent på. Overføring av elementer av utseende fra en modell til en gjenstand (for eksempel et klesskifte). Generering av en ny vinkel (for eksempel syntese av et profilbilde basert på et helbilde). Alle tre metodene kan kombineres, for eksempel kan du generere en video fra et fotografi som simulerer ytelsen til et komplekst akrobatisk triks i forskjellige klær.
Under synteseprosessen utføres operasjonene med å velge et objekt i et fotografi og danne de manglende bakgrunnselementene ved bevegelse samtidig. Den nevrale nettverksmodellen kan trenes én gang og brukes til ulike transformasjoner. For lasting
I motsetning til transformasjonsmetoder basert på transformasjon ved nøkkelpunkter som beskriver plasseringen av kroppen i todimensjonalt rom, forsøker Impersonator å syntetisere et tredimensjonalt nett med en beskrivelse av kroppen ved hjelp av maskinlæringsmetoder.
Den foreslåtte metoden tillater manipulasjoner som tar hensyn til den personlige kroppsformen og nåværende holdning, og simulerer de naturlige bevegelsene til lemmene.
For å bevare original informasjon som teksturer, stil, farger og ansiktsgjenkjenning under transformasjonsprosessen,
Kilde: opennet.ru