Një grup kërkuesish nga disa universitete amerikane publikoi një projekt (Pixel-Aligned Implicit Function), që lejon përdorimin e metodave të mësimit të makinerive për ndërtimin e një modeli 3D të njeriut nga një ose më shumë imazhe dy-dimensionale. Sistemi lejon riprodhimin e variacioneve komplekse të veshjeve, të tilla si fundet me palosje dhe këpucët me takë, si dhe ndryshime në hairstyle, duke rikonstrukturuar vetë teksturën dhe formën në zona që nuk janë të dukshme në projekcionin nga i cili krijohet modeli 3D. Për të rritur cilësinë dhe detajet e modelit përfundimtar 3D, mund të përdoren disa imazhe nga këndvështrime të ndryshme. Kodi i projektit është shkruar në gjuhën Python duke përdorur framework-un PyTorch dhe në përputhje me licencën MIT.
Si burimi për rekonstruktimin e një modeli volumetrik është një rrjet nervor që lejon zgjedhjen e formës më të mundshme dhe plotësimin e elementeve të fshehura, duke u nisur nga modeli i trajnuar me varianta të ndryshme të objekteve ekzistuese. Paralelisht, projekti ofron një algoritëm për përputhjen e modelit volumetrik të marrë me teksturat në imazhet 2D të ofruara, i cili rregullon pikselët e imazhit 2D sipas pozicionit të tyre në objektin 3D dhe gjeneron teksturat më të mundshme që mungojnë. Për kodimin e imazhit mund të përdoret çdo , për
rekonstruktimin e sipĂ«rfaqes Ă«shtĂ« pĂ«rdorur arkitektura ââ, dhe
për përputhjen e teksturave është angazhuar një rrjet nervor me bazë arkitekturën .
Modeli i trajnuar i përdorur nga hulumtuesit për shkarkim të lirë, por të dhënat burimore mbi të cilat është kryer trajnimi mbeten të mbyllura, pasi ato janë të bazuara në rezultatet e skanimit 3D komercial. Si burim për trajnimin e vet modelit mund të përdoret njerëz nga projekti Renderpeople.
Burimi: opennet.ru
