Jaringan saraf anu nyiptakeun pidéo asli dumasar kana déskripsi téks parantos aya. Sareng sanaos aranjeunna henteu acan tiasa ngagentos lengkep produsén film atanapi animator, parantos aya kamajuan dina arah ieu. Disney Panalungtikan sarta Rutgers jaringan saraf nu bisa nyieun storyboard kasar jeung video tina naskah téks.
Sakumaha anu kacatet, sistemna tiasa dianggo sareng basa alami, anu ngamungkinkeun éta dianggo dina sababaraha daérah, sapertos nyiptakeun pidéo pendidikan. Sistem ieu ogé bakal ngabantosan panulis layar pikeun ngabayangkeun ideu. Dina waktu nu sarua, disebutkeun yen tujuanana teu ngaganti panulis sarta seniman, tapi sangkan karya maranéhanana leuwih efisien sarta kirang tedious.
Pamekar nyarios yén narjamahkeun téks kana animasi sanés tugas anu gampang sabab data input sareng output henteu gaduh struktur anu tetep. Ku alatan éta, lolobana sistem misalna teu bisa ngolah kalimat kompléks. Pikeun nungkulan watesan program sarupa saméméhna, pamekar ngawangun jaringan saraf modular diwangun ku sababaraha komponén. Ieu kalebet modul ngolah basa alami, modul parsing naskah, sareng modul anu ngahasilkeun animasi.
Pikeun mimitian ku, sistem nganalisa téks sareng narjamahkeun kalimat kompleks kana anu saderhana. Saatos ieu, animasi 3D didamel. Pikeun digawé, perpustakaan 52 blok animasi dipaké, daptar nu geus dimekarkeun jadi 92 ku nambahkeun elemen sarupa. Pikeun nyieun animasi, mesin kaulinan Unreal Engine dipaké, nu ngandelkeun objék preloaded jeung model. Tina ieu, sistem milih elemen anu cocog sareng ngahasilkeun pidéo.
Pikeun ngalatih sistem, panalungtik nyusun sakumpulan déskripsi ngeunaan 996 elemen anu dicandak tina langkung ti 1000 naskah ti IMSDb, SimplyScripts sareng ScriptORama5. Saatos ieu, tés kualitatif dilaksanakeun, dimana 22 pamilon ngagaduhan kasempetan pikeun meunteun 20 animasi. Dina waktos anu sami, 68% nyarios yén sistem nyiptakeun animasi anu lumayan dumasar kana téks input.
Tapi, tim ngaku yén sistem éta henteu sampurna. Daptar lampah sareng objékna henteu lengkep, sareng kadang nyederhanakeun léksikal henteu cocog sareng kecap pagawéan sareng animasi anu sami. Para panalungtik maksudna pikeun ngungkulan kakurangan ieu dina karya anu bakal datang.
sumber: 3dnews.ru