PIFu është një sistem mësimi i makinerive për ndërtimin e një modeli 3D të një personi bazuar në fotografi 2D

Një grup studiuesish nga disa universitete amerikane publikuan një projekt PIFu (Pixel-Aligned Implicit Function), i cili ju lejon të aplikoni metoda të mësimit të makinerive për të ndërtuar një model 3D të një personi nga një ose më shumë imazhe dy-dimensionale. Sistemi ju lejon të rikrijoni opsione komplekse veshjesh, të tilla si funde dhe taka me palosje, dhe modele të ndryshme flokësh, duke rivendosur në mënyrë të pavarur strukturën dhe formën në zonat e padukshme në projeksionin nga i cili është ndërtuar modeli 3D. Për të rritur cilësinë dhe detajet e modelit përfundimtar 3D, mund të përdoren disa imazhe nga kënde të ndryshme. Kodi i projektit është shkruar në Python duke përdorur kornizën PyTorch dhe shperndare nga nën licencën MIT.

PIFu - një sistem mësimi i makinerisë për ndërtimin e një modeli 3D të një personi bazuar në fotografi 2D

NjĂ« rrjet nervor pĂ«rdoret si njĂ« burim pĂ«r rindĂ«rtimin e njĂ« paraqitjeje tre-dimensionale, e cila ju lejon tĂ« zgjidhni formĂ«n mĂ« tĂ« mundshme dhe tĂ« shpikni elementĂ« tĂ« fshehur, duke filluar nga njĂ« model i trajnuar nĂ« versione tĂ« ndryshme tĂ« objekteve ekzistuese. Paralelisht, projekti ofron njĂ« algoritĂ«m pĂ«r pĂ«rputhjen e paraqitjes vĂ«llimore qĂ« rezulton me teksturat nĂ« imazhet e ofruara 2D, i cili rreshton pikselĂ«t e imazhit 3D sipas pozicionit tĂ« tyre nĂ« objektin XNUMXD dhe gjeneron teksturat mĂ« tĂ« mundshme qĂ« mungojnĂ«. Çdo imazh mund tĂ« kodohet rrjeti nervor konvolucionalpĂ«r
Arkitektura e aplikuar e rindërtimit të sipërfaqes "Orë me rërë e grumbulluar", a
Rrjeti nervor i bazuar në arkitekturë përdoret për përputhjen e teksturave CycleGAN.

PIFu - një sistem mësimi i makinerisë për ndërtimin e një modeli 3D të një personi bazuar në fotografi 2D

Modeli i gatshëm i trajnuar i përdorur nga studiuesit në dispozicion është i disponueshëm për shkarkim falas, por të dhënat e papërpunuara të përdorura për trajnime mbeten private pasi bazohen në skanimet komerciale 3D. Mund të përdoret si burim për vetë-trajnimin e modelit Baza e të dhënave të modelit 3D njerëz nga projekti Renderpeople.

Luaj Video

Burimi: opennet.ru

Bleni njĂ« host tĂ« besueshĂ«m pĂ«r faqet me mbrojtje DDoS, serverĂ« VPS VDS đŸ”„ Bleni hosting tĂ« besueshĂ«m tĂ« faqeve tĂ« internetit me mbrojtje DDoS, servera VPS VDS | ProHoster