Jaringan saraf sing nggawe video asli adhedhasar deskripsi teks wis ana. Lan sanajan dheweke durung bisa ngganti kabeh pembuat film utawa animator, wis ana kemajuan ing arah iki. Riset Disney lan Rutgers jaringan saraf sing bisa nggawe storyboard kasar lan video saka script teks.
Kaya sing kacathet, sistem kasebut bisa digunakake kanthi basa alami, sing ngidini digunakake ing sawetara wilayah, kayata nggawe video pendidikan. Sistem kasebut uga bakal mbantu para panulis skenario nggambarake ide-ide kasebut. Semanten ugi dipunandharaken bilih ancasipun boten kangge ngganteni sastrawan lan seniman, ananging supados karyanipun langkung irit lan mboten ngremenaken.
Pangembang ujar manawa nerjemahake teks menyang animasi dudu tugas sing gampang amarga data input lan output ora duwe struktur sing tetep. Mulane, umume sistem kasebut ora bisa ngolah kalimat kompleks. Kanggo ngatasi watesan program sing padha sadurunge, para pangembang mbangun jaringan saraf modular sing dumadi saka sawetara komponen. Iki kalebu modul pangolahan basa alami, modul parsing script, lan modul sing ngasilake animasi.
Kanggo miwiti, sistem nganalisa teks lan nerjemahake ukara kompleks dadi prasaja. Sawise iki, animasi 3D digawe. Kanggo karya, perpustakaan 52 blok animasi digunakake, dhaptar sing ditambahi dadi 92 kanthi nambah unsur sing padha. Kanggo nggawe animasi, mesin game Unreal Engine digunakake, sing gumantung ing obyek lan model sing wis dimuat. Saka iki, sistem milih unsur sing cocog lan ngasilake video.
Kanggo nglatih sistem kasebut, para peneliti nyusun set deskripsi saka 996 unsur sing dijupuk saka luwih saka 1000 skrip saka IMSDb, SimplyScripts lan ScriptORama5. Sawise iki, tes kualitatif ditindakake, ing ngendi 22 peserta duwe kesempatan kanggo ngevaluasi 20 animasi. Ing wektu sing padha, 68% ujar manawa sistem kasebut nggawe animasi sing cukup apik adhedhasar teks input.
Nanging, tim kasebut ngakoni manawa sistem kasebut ora sampurna. Dhaptar tumindak lan obyek ora lengkap, lan kadhangkala simplifikasi leksikal ora cocog karo kriya kanthi animasi sing padha. Para panaliti arep ngatasi kekurangan kasebut ing karya sabanjure.
Source: 3dnews.ru