ഫോട്ടോഗ്രാഫുകളിൽ നിന്ന് ആളുകളുടെ 3D മോഡലുകൾ നിർമ്മിക്കുന്നതിനുള്ള PIXIE പ്രോജക്റ്റ് പ്രസിദ്ധീകരിച്ചു

PIXIE മെഷീൻ ലേണിംഗ് സിസ്റ്റത്തിന്റെ സോഴ്സ് കോഡ് തുറന്നിരിക്കുന്നു, ഒരു ഫോട്ടോയിൽ നിന്ന് മനുഷ്യശരീരത്തിന്റെ 3D മോഡലുകളും ആനിമേറ്റഡ് അവതാരങ്ങളും സൃഷ്ടിക്കാൻ നിങ്ങളെ അനുവദിക്കുന്നു. യഥാർത്ഥ ഫോട്ടോയിൽ ചിത്രീകരിച്ചിരിക്കുന്നതിൽ നിന്ന് വ്യത്യസ്തമായ റിയലിസ്റ്റിക് ഫേഷ്യൽ, വസ്ത്ര ടെക്സ്ചറുകൾ തത്ഫലമായുണ്ടാകുന്ന മോഡലിൽ ഘടിപ്പിക്കാം. ഉദാഹരണത്തിന്, വ്യത്യസ്തമായ കാഴ്ചപ്പാടിൽ നിന്ന് റെൻഡർ ചെയ്യാനും ആനിമേഷൻ സൃഷ്ടിക്കാനും മുഖത്തിന്റെ ആകൃതിയെ അടിസ്ഥാനമാക്കി ശരീരം പുനർനിർമ്മിക്കാനും വിരലുകളുടെ 3D മോഡൽ സൃഷ്ടിക്കാനും സിസ്റ്റം ഉപയോഗിക്കാം. പൈറ്റോർച്ച് ചട്ടക്കൂട് ഉപയോഗിച്ച് പൈത്തണിലാണ് കോഡ് എഴുതിയിരിക്കുന്നത്, വാണിജ്യേതര ഉപയോഗത്തിന് മാത്രമുള്ള ലൈസൻസിന് കീഴിലാണ് ഇത് വിതരണം ചെയ്യുന്നത്.

സമാന പ്രോജക്റ്റുകളുമായി താരതമ്യപ്പെടുത്തുമ്പോൾ, ശരീരത്തിന്റെ രൂപരേഖകൾ കൂടുതൽ കൃത്യമായി പുനർനിർമ്മിക്കാൻ PIXIE നിങ്ങളെ അനുവദിക്കുന്നു, തുടക്കത്തിൽ ഫോട്ടോയിലെ വസ്ത്രങ്ങൾ, മുഖത്തിന്റെ ആകൃതി, കൈകളുടെ സന്ധികളുടെ സ്ഥാനം എന്നിവയാൽ മറഞ്ഞിരിക്കുന്നു. ഒരു പിക്സൽ ഇമേജിൽ നിന്ന് മുഖം, ശരീരം, കൈകൾ എന്നിവയുടെ പാരാമീറ്ററുകൾ വേർതിരിച്ചെടുക്കുന്ന ഒരു ന്യൂറൽ നെറ്റ്‌വർക്കിന്റെ ഉപയോഗത്തെ അടിസ്ഥാനമാക്കിയുള്ളതാണ് ഈ രീതി. ന്യൂറൽ നെറ്റ്‌വർക്കിന്റെ പ്രവർത്തനം ഒരു പ്രത്യേക കൺട്രോളറാണ് ഏകോപിപ്പിക്കുന്നത്, ഇത് പ്രകാശത്തിന്റെ വിശകലനത്തെ അടിസ്ഥാനമാക്കി, പ്രകൃതിവിരുദ്ധ പോസുകൾ കണ്ടെത്തുന്നത് ഒഴിവാക്കുന്നതിന് ശരീരത്തിന്റെ വിവിധ ഭാഗങ്ങളുടെ വെയ്റ്റിംഗ് ഗുണകങ്ങളെക്കുറിച്ചുള്ള വിവരങ്ങൾ ചേർക്കുന്നു. ഒരു മോഡൽ സൃഷ്ടിക്കുമ്പോൾ, സ്ത്രീയും പുരുഷനും തമ്മിലുള്ള ശരീരഘടനാപരമായ വ്യത്യാസങ്ങൾ, പോസ്ചർ പാരാമീറ്ററുകൾ, ലൈറ്റിംഗ്, ഉപരിതല പ്രതിഫലനം, ത്രിമാന തലത്തിൽ മുഖത്തിന്റെ ഭ്രമണം എന്നിവ കണക്കിലെടുക്കുന്നു.

PIXIE യുടെ സവിശേഷതകൾ:

• പുനർനിർമ്മിച്ച 3D ബോഡി മോഡലും പോസ്, കൈയുടെ സ്ഥാനം, മുഖഭാവം എന്നിവയെക്കുറിച്ചുള്ള വിവരങ്ങളും SMPL-X പാരാമീറ്ററുകളുടെ ഒരു കൂട്ടമായി സംരക്ഷിച്ചിരിക്കുന്നു, ഇത് പിന്നീട് ഒരു പ്ലഗിൻ വഴി ബ്ലെൻഡർ മോഡലിംഗ് സിസ്റ്റത്തിൽ ഉപയോഗിക്കാനാകും.
• ഫോട്ടോയിൽ നിന്ന്, മുഖത്തിന്റെ ആകൃതിയും ഭാവവും, അതുപോലെ തന്നെ ചുളിവുകളുടെ സാന്നിധ്യം പോലുള്ള അതിന്റെ സവിശേഷതകളും വിശദമായ വിവരങ്ങൾ നിർണ്ണയിക്കപ്പെടുന്നു (അതേ രചയിതാക്കൾ വികസിപ്പിച്ചെടുത്ത DECA മെഷീൻ ലേണിംഗ് സിസ്റ്റം, ഒരു ഹെഡ് മോഡൽ നിർമ്മിക്കാൻ ഉപയോഗിക്കുന്നു) .
• ഒരു മുഖം ടെക്സ്ചർ സൃഷ്ടിക്കുമ്പോൾ, വസ്തുവിന്റെ ആൽബിഡോ കണക്കാക്കുന്നു.
• നിർമ്മിച്ച ബോഡി മോഡൽ പിന്നീട് ആനിമേറ്റ് ചെയ്യാം അല്ലെങ്കിൽ മറ്റൊരു പോസിൽ അവതരിപ്പിക്കാം.
• സ്വാഭാവിക സാഹചര്യങ്ങളിൽ ഒരു വ്യക്തിയുടെ സാധാരണ ഫോട്ടോഗ്രാഫുകളിൽ നിന്ന് ഒരു മാതൃക നിർമ്മിക്കുന്നതിനുള്ള പിന്തുണ. വ്യത്യസ്‌ത പോസുകൾ, ലൈറ്റിംഗ് അവസ്ഥകൾ, ഒരു വസ്തുവിന്റെ ഭാഗങ്ങളുടെ ദൃശ്യപരത എന്നിവ കണ്ടെത്തുന്നതിന് PIXIE ഒരു നല്ല ജോലി ചെയ്യുന്നു.
• ഉയർന്ന പ്രകടനം, ക്യാമറ ഇമേജുകളുടെ ഡൈനാമിക് പ്രോസസ്സിംഗിന് അനുയോജ്യമാണ്.

അവലംബം: opennet.ru