ПИФу је систем машинског учења за конструисање 3Д модела особе на основу 2Д фотографија

Група истраживача са неколико америчких универзитета објавила је пројекат ПИФу (Пикел-Алигнед Имплицит Фунцтион), која вам омогућава да примените методе машинског учења да бисте направили 3Д модел особе од једне или више дводимензионалних слика. Систем вам омогућава да поново креирате сложене опције одеће, као што су плисиране сукње и штикле, и разне фризуре, независно враћајући текстуру и облик у областима невидљивим у пројекцији од којих је направљен 3Д модел. За повећање квалитета и детаља коначног 3Д модела може се користити неколико слика из различитих углова. Код пројекта је написан у Питхон-у користећи ПиТорцх фрамеворк и дистрибуира под лиценцом МИТ-а.

ПИФу – систем машинског учења за конструисање 3Д модела особе на основу 2Д фотографија

Неуронска мрежа се користи као извор за реконструкцију тродимензионалног распореда, који вам омогућава да изаберете највероватнији облик и измислите скривене елементе, почевши од модела обученог на различитим верзијама постојећих објеката. Паралелно, пројекат обезбеђује алгоритам за упаривање резултујућег волуметријског распореда са текстурама на датим 2Д сликама, који поравнава пикселе 3Д слике према њиховој позицији на XNUMXД објекту и генерише највероватније недостајуће текстуре. Било која слика се може кодирати конволуциона неуронска мрежаза
површинска реконструкција примењена архитектура"Наслагани пешчани сат", а
неуронска мрежа заснована на архитектури се користи за усклађивање текстура ЦицлеГАН.

ПИФу – систем машинског учења за конструисање 3Д модела особе на основу 2Д фотографија

Готови обучени модел који користе истраживачи је доступан је доступан за бесплатно преузимање, али необрађени подаци који се користе за обуку остају приватни јер су засновани на комерцијалним 3Д скенирањима. Може се користити као извор за самообуку модела База података 3Д модела људи из пројекта Рендерпеопле.

Извор: опеннет.ру

Додај коментар