Frumtextar PIXIE vélanámskerfisins, sem gerir þér kleift að búa til þrívíddarlíkön og hreyfimyndir af mannslíkamanum úr einni mynd, eru opnir. Raunhæf áferð andlits og föt er hægt að festa við líkanið sem myndast, sem er frábrugðið þeim sem sýndar eru á upprunalegu myndinni. Kerfið má til dæmis nota til að teikna frá öðru sjónarhorni, búa til hreyfimyndir, endurbyggja líkamann í samræmi við lögun andlitsins og mynda þrívíddarlíkan af fingrum. Kóðinn er skrifaður í Python með Pytorch ramma og dreift með leyfi sem leyfir eingöngu notkun án viðskipta.
Fram kemur að miðað við sambærileg verkefni gerir PIXIE þér kleift að endurskapa útlínur líkamans, upphaflega falin af klæðnaði á myndinni, með nákvæmari hætti, lögun andlitsins og stöðu handaliða. Aðferðin byggist á notkun tauganets sem dregur út andlits-, líkama- og handfæri úr pixlamynd. Starf taugakerfisins er samræmt af sérstökum eftirlitsstofni, sem, byggt á greiningu á lýsingu, bætir við upplýsingum um þyngdarstuðla ýmissa hluta líkamans til að útrýma skilgreiningu á óeðlilegum stellingum. Þegar líkan er búið til er tekið tillit til líffærafræðilegs muns á karl- og kvenlíkamanum, stillingarbreytur, lýsingu, endurspeglun yfirborðs og snúning andlits í þrívíðu plani.
PIXIE eiginleikar:
- Endurbyggt þrívíddarlíkan af líkamanum, sem og upplýsingar um stellingu, stöðu handa og svipbrigði eru vistuð sem sett af SMPL-X breytum, sem síðar er hægt að nota í Blender líkanakerfinu í gegnum viðbót.
- Nákvæmar upplýsingar um lögun og svipbrigði andlitsins, svo og eiginleika þess, svo sem hrukkum, eru ákvörðuð út frá myndinni (DECA vélanámskerfið þróað af sömu höfundum er notað til að byggja höfuðlíkanið).
- Þegar andlitsáferð er mynduð er albedo hlutarins metin.
- Síðar er hægt að teikna líkamslíkanið eða sýna það í annarri stellingu.
- Stuðningur við að byggja líkan úr venjulegum ljósmyndum þar sem einstaklingur er tekinn við náttúrulegar aðstæður. PIXIE gerir gott starf við að skilgreina mismunandi stellingar, birtuskilyrði og skarast á sýnileika hluta hlutar.
- Mikil afköst, hentugur fyrir kraftmikla vinnslu myndavélarmyndarinnar.
Heimild: opennet.ru