Mətn təsvirləri əsasında orijinal videolar yaradan neyron şəbəkələr artıq mövcuddur. Və hələ ki, rejissorları və ya animatorları tam əvəz edə bilməsələr də, bu istiqamətdə artıq irəliləyiş var. Disney Araşdırma və Rutgers mətn skriptindən kobud storyboard və video yarada bilən neyron şəbəkəsi.
Qeyd edildiyi kimi, sistem təbii dillə işləyir ki, bu da ondan maarifləndirici videoçarxların yaradılması kimi bir sıra sahələrdə istifadə etməyə imkan verəcək. Bu sistemlər həm də ssenaristlərə öz fikirlərini vizuallaşdırmağa kömək edəcək. Eyni zamanda bildirilir ki, məqsəd yazıçı və sənət adamlarını əvəz etmək deyil, onların işini daha səmərəli və yorucu etməkdir.
Tərtibatçılar bildirirlər ki, mətni animasiyaya çevirmək asan məsələ deyil, çünki giriş və çıxış verilənləri sabit struktura malik deyil. Buna görə də belə sistemlərin əksəriyyəti mürəkkəb cümlələri işləyə bilmir. Əvvəlki oxşar proqramların məhdudiyyətlərini aradan qaldırmaq üçün tərtibatçılar bir neçə komponentdən ibarət modul neyron şəbəkəsi qurmuşlar. Bunlara təbii dil emal modulu, skript təhlili modulu və animasiya yaradan modul daxildir.
Başlamaq üçün sistem mətni təhlil edir və mürəkkəb cümlələri sadə cümlələrə çevirir. Bundan sonra 3D animasiya yaradılır. İş üçün 52 animasiya blokundan ibarət bir kitabxana istifadə olunur, onların siyahısı oxşar elementlər əlavə edilərək 92-yə qədər genişləndirildi. Animasiya yaratmaq üçün əvvəlcədən yüklənmiş obyektlərə və modellərə əsaslanan Unreal Engine oyun mühərrikindən istifadə olunur. Bunlardan sistem uyğun elementləri seçir və video yaradır.
Sistemi öyrətmək üçün tədqiqatçılar IMSDb, SimplyScripts və ScriptORama996-dən 1000-dən çox skriptdən götürülmüş 5 elementdən ibarət təsvirlər toplusunu tərtib ediblər. Bundan sonra 22 iştirakçının 20 animasiyanı qiymətləndirmək imkanı əldə etdiyi keyfiyyət testləri aparılıb. Eyni zamanda, 68% sistemin daxil edilən mətnlər əsasında kifayət qədər layiqli animasiya yaratdığını bildirib.
Bununla belə, komanda sistemin mükəmməl olmadığını etiraf edib. Onun hərəkət və obyektlərin siyahısı tam deyil və bəzən leksik sadələşdirmə oxşar animasiyalı fellərə uyğun gəlmir. Tədqiqatçılar gələcək işlərində bu çatışmazlıqları aradan qaldırmaq niyyətindədirlər.
Mənbə: 3dnews.ru