It-testi tas-sors tas-sistema tat-tagħlim tal-magni PIXIE, li tippermettilek toħloq mudelli 3D u avatars animati tal-ġisem tal-bniedem minn ritratt wieħed, huma miftuħa. Nisġa realistiċi tal-wiċċ u l-ħwejjeġ jistgħu jitwaħħlu mal-mudell li jirriżulta, li huma differenti minn dawk murija fir-ritratt oriġinali. Is-sistema tista 'tintuża, pereżempju, biex tiġbed minn perspettiva differenti, toħloq animazzjoni, tibni mill-ġdid il-ġisem skont il-forma tal-wiċċ, u tifforma mudell 3D tas-swaba'. Il-kodiċi huwa miktub f'Python bl-użu tal-qafas Pytorch u mqassam taħt liċenzja li tippermetti biss użu mhux kummerċjali.
Huwa ddikjarat li meta mqabbel ma 'proġetti simili, PIXIE jippermettilek li toħloq mill-ġdid b'mod aktar preċiż il-kontorni tal-ġisem, oriġinarjament moħbija mill-ħwejjeġ fir-ritratt, il-forma tal-wiċċ u l-pożizzjoni tal-ġogi tal-idejn. Il-metodu huwa bbażat fuq l-użu ta 'netwerk newrali li estratti parametri tal-wiċċ, tal-ġisem u tal-idejn minn immaġni tal-pixel. Ix-xogħol tan-netwerk newrali huwa kkoordinat minn regolatur speċjali, li, ibbażat fuq l-analiżi tal-illuminazzjoni, iżid informazzjoni dwar il-koeffiċjenti tal-piż ta 'diversi partijiet tal-ġisem biex jelimina d-definizzjoni ta' pożizzjonijiet mhux naturali. Meta jinħoloq mudell, jitqiesu d-differenzi anatomiċi bejn il-korpi maskili u femminili, il-parametri tal-pożi, id-dawl, ir-riflettività tal-wiċċ u r-rotazzjoni tal-wiċċ fi pjan tridimensjonali.
Karatteristiċi ta' PIXIE:
- Il-mudell 3D tal-ġisem rikostruwit, kif ukoll informazzjoni dwar il-pożi, il-pożizzjoni tal-idejn u l-espressjonijiet tal-wiċċ huma ssejvjati bħala sett ta 'parametri SMPL-X, li aktar tard jistgħu jintużaw fis-sistema ta' mmudellar Blender permezz ta 'plugin.
- Informazzjoni dettaljata dwar il-forma u l-espressjoni tal-wiċċ, kif ukoll il-karatteristiċi tiegħu, bħall-preżenza ta 'tikmix, hija determinata mir-ritratt (is-sistema ta' tagħlim tal-magni DECA żviluppata mill-istess awturi tintuża biex jinbena l-mudell tar-ras).
- Meta tiġġenera tessut tal-wiċċ, l-albedo tal-oġġett huwa stmat.
- Il-mudell tal-ġisem mibni jista 'aktar tard jiġi animat jew ippreżentat f'pożizzjoni differenti.
- Appoġġ għall-bini ta 'mudell minn ritratti ordinarji li fihom persuna tittieħed f'kundizzjonijiet naturali. PIXIE jagħmel xogħol tajjeb biex jiddefinixxi pożi differenti, kundizzjonijiet tad-dawl, u joskura l-viżibilità ta 'partijiet ta' oġġett.
- Prestazzjoni għolja, adattata għall-ipproċessar dinamiku tal-immaġni tal-kamera.
Sors: opennet.ru