Publicēts projekts PIXIE cilvēku 3D modeļu veidoÅ”anai no fotogrāfijas

Ir atvērts PIXIE maŔīnmācīŔanās sistēmas pirmkods, kas ļauj no vienas fotogrāfijas izveidot 3D modeļus un animētus cilvēka Ä·ermeņa iemiesojumus. IegÅ«tajam modelim var pievienot reālistiskas sejas un apģērba faktÅ«ras, kas atŔķiras no oriÄ£inālajā fotogrāfijā attēlotajām. Sistēmu var izmantot, piemēram, lai renderētu no cita skatu punkta, izveidotu animāciju, rekonstruētu Ä·ermeni pēc sejas formas un Ä£enerētu pirkstu 3D modeli. Kods ir rakstÄ«ts Python, izmantojot Pytorch sistēmu, un tiek izplatÄ«ts saskaņā ar licenci tikai nekomerciālai lietoÅ”anai.

Tiek norādÄ«ts, ka, salÄ«dzinot ar lÄ«dzÄ«giem projektiem, PIXIE ļauj precÄ«zāk atjaunot Ä·ermeņa kontÅ«ras, kuras fotogrāfijā sākotnēji slēpj apģērbs, sejas formu un roku locÄ«tavu stāvokli. Metodes pamatā ir neironu tÄ«kla izmantoÅ”ana, kas no pikseļu attēla iegÅ«st sejas, Ä·ermeņa un roku parametrus. Neironu tÄ«kla darbu koordinē Ä«paÅ”s kontrolieris, kas, pamatojoties uz apgaismojuma analÄ«zi, pievieno informāciju par dažādu Ä·ermeņa daļu svēruma koeficientiem, lai izslēgtu nedabisku pozu noteikÅ”anu. Veidojot modeli, tiek ņemtas vērā vÄ«rieÅ”a un sievietes Ä·ermeņa anatomiskās atŔķirÄ«bas, stājas parametri, apgaismojums, virsmas atstaroÅ”anās spēja un sejas rotācija trÄ«sdimensiju plaknē.

PIXIE funkcijas:

  • Rekonstruētais 3D Ä·ermeņa modelis, kā arÄ« informācija par pozu, roku stāvokli un sejas izteiksmi tiek saglabāta kā SMPL-X parametru kopa, ko vēlāk ar spraudņa palÄ«dzÄ«bu var izmantot Blender modelēŔanas sistēmā.
  • No fotogrāfijas tiek noteikta detalizēta informācija par sejas formu un izteiksmi, kā arÄ« tās iezÄ«mēm, piemēram, grumbu esamÄ«bu (galvas modeļa izveidoÅ”anai tiek izmantota to paÅ”u autoru izstrādātā maŔīnmācīŔanās sistēma DECA) .
  • Ä¢enerējot sejas tekstÅ«ru, tiek novērtēts objekta albedo.
  • Konstruēto Ä·ermeņa modeli vēlāk var animēt vai parādÄ«t citā pozā.
  • Atbalsts modeļa veidoÅ”anai no parastajām cilvēka fotogrāfijām dabiskos apstākļos. PIXIE veic labu darbu, lai noteiktu dažādas pozas, apgaismojuma apstākļus un traucētu objekta daļu redzamÄ«bu.
  • Augsta veiktspēja, piemērota kameras attēlu dinamiskai apstrādei.

Publicēts projekts PIXIE cilvēku 3D modeļu veidoÅ”anai no fotogrāfijas
Publicēts projekts PIXIE cilvēku 3D modeļu veidoÅ”anai no fotogrāfijas
Publicēts projekts PIXIE cilvēku 3D modeļu veidoÅ”anai no fotogrāfijas


Avots: opennet.ru
Iegādājieties uzticamu mitināŔanu vietnēm ar DDoS aizsardzÄ«bu, VPS VDS serveriem šŸ”„ Iegādājieties uzticamu tÄ«mekļa vietņu mitināŔanu ar DDoS aizsardzÄ«bu, VPS VDS serveriem | ProHoster