Taugakerfi sem búa til frumleg myndbönd byggð á textalýsingum eru þegar til. Og þó að þeir séu ekki enn færir um að koma algjörlega í stað kvikmyndagerðarmanna eða hreyfimynda, þá eru þegar framfarir í þessa átt. Disney Research og Rutgers tauganet sem getur búið til gróft söguborð og myndband úr textahandriti.
Eins og fram hefur komið vinnur kerfið með náttúrulegu tungumáli, sem gerir það kleift að nota það á ýmsum sviðum, svo sem að búa til fræðslumyndbönd. Þessi kerfi munu einnig hjálpa handritshöfundum að sjá hugmyndir sínar. Jafnframt kemur fram að markmiðið sé ekki að leysa rithöfunda og listamenn af hólmi heldur að gera starf þeirra skilvirkara og leiðinlegra.
Hönnuðir segja að það sé ekki auðvelt verk að þýða texta í hreyfimyndir vegna þess að inntaks- og úttaksgögnin hafa ekki fasta uppbyggingu. Því geta flest slík kerfi ekki unnið úr flóknum setningum. Til að sigrast á takmörkunum fyrri svipaðra forrita byggðu verktaki upp mát taugakerfi sem samanstendur af nokkrum hlutum. Þar á meðal eru náttúruleg málvinnslueining, forskriftarþáttunareining og eining sem býr til hreyfimyndir.
Til að byrja með greinir kerfið textann og þýðir flóknar setningar yfir í einfaldar. Eftir þetta er búið til 3D hreyfimynd. Fyrir vinnu er bókasafn með 52 hreyfimyndum notað, listinn yfir sem var stækkaður í 92 með því að bæta við svipuðum þáttum. Til að búa til hreyfimyndir er Unreal Engine leikjavélin notuð sem byggir á forhlaðnum hlutum og líkönum. Úr þeim velur kerfið viðeigandi þætti og býr til myndband.
Til að þjálfa kerfið tóku rannsakendur saman sett af lýsingum á 996 þáttum teknir úr meira en 1000 skriftum úr IMSDb, SimplyScripts og ScriptORama5. Að þessu loknu voru gerð eigindleg próf þar sem 22 þátttakendur fengu tækifæri til að meta 20 hreyfimyndir. Á sama tíma sögðu 68% að kerfið bjó til ágætis hreyfimynd út frá innsláttartextunum.
Hins vegar viðurkenndi liðið að kerfið væri ekki fullkomið. Listi þess yfir aðgerðir og hluti er ekki tæmandi og stundum passar orðafræðileg einföldun ekki við sagnir með svipuðum hreyfimyndum. Vísindamennirnir hyggjast taka á þessum annmörkum í framtíðarvinnu.
Heimild: 3dnews.ru