Një grup kërkuesish nga disa universitete amerikane publikoi projektin (Funksioni Implicit i Pajisjes së Realizuar në Pixel), i cili lejon aplikimin e metodave të mësimdhënies makinerike për ndërtimin e një modeli 3D të njeriut nga një ose disa imazhe dy-dimensionale. Sistemi lejon riprodhimin e varianteve të ndërlikuara të veshjeve, siç janë fundet me palosje dhe këpucët me taka, dhe hairstyles të ndryshme, duke rikuperuar automatikisht teksturën dhe formën në zona që janë të padukshme në projekcionin me të cilin krijohet modeli 3D. Për të rritur cilësinë dhe detajet e modelit përfundimtar 3D, mund të përdoren disa imazhe nga kënde të ndryshme. Kodi i projektit është shkruar në gjuhën Python duke përdorur kuadri PyTorch dhe nën licencën MIT.
Si burim për rikonstruktimin e modelit volumetrik përdoret një rrjet nervor që lejon përzgjedhjen e formës më të mundshme dhe zbulojnë elemente të fshehura, duke u mbështetur në modelin e trajnuar mbi variante të ndryshme të objekteve ekzistuese. Paralelisht, projekti ofron një algoritëm për përputhjen e modelit volumetrik të marrë me teksturat në imazhet dy-dimensionale të ofruara, i cili rregullon pixelët e imazhit 2D në përputhje me pozitat e tyre në objektin 3D dhe gjeneron teksturat më të mundshme që mungojnë. Për kodimin e imazhit mund të përdoret çfarëdo paraqet një problem
për rikonstruktimin e sipërfaqes është aplikuar arkitektura "" dhe
për përputhjen e teksturave është përdorur një rrjet nervor bazuar në arkitekturën .
Modeli i trajnuar që është përdorur nga kërkuesit është në dispozitë për shkarkim të lirë, por të dhënat origjinale mbi të cilat është zhvilluar mbeten të mbyllura, pasi që ato bazohen në rezultatet e skanimit 3D komercial. Si burim për trajnim të pavarur të modelit mund të përdoret të njerëzve nga projekti Renderpeople.
Burimi: opennet.ru
