Mae rhwydweithiau niwral sy'n creu fideos gwreiddiol yn seiliedig ar ddisgrifiadau testun eisoes yn bodoli. Ac er nad ydynt eto'n gallu disodli gwneuthurwyr ffilm neu animeiddwyr yn llwyr, mae cynnydd eisoes i'r cyfeiriad hwn. Ymchwil Disney a Rutgers rhwydwaith niwral sy'n gallu creu bwrdd stori bras a fideo o sgript testun.
Fel y nodwyd, mae'r system yn gweithio gydag iaith naturiol, a fydd yn caniatáu iddo gael ei ddefnyddio mewn nifer o feysydd, megis creu fideos addysgol. Bydd y systemau hyn hefyd yn helpu ysgrifenwyr sgrin i ddelweddu eu syniadau. Ar yr un pryd, dywedir nad disodli awduron ac artistiaid yw'r nod, ond i wneud eu gwaith yn fwy effeithlon ac yn llai diflas.
Dywed y datblygwyr nad yw trosi testun yn animeiddiad yn dasg hawdd oherwydd nad oes gan y data mewnbwn ac allbwn strwythur sefydlog. Felly, ni all y rhan fwyaf o systemau o'r fath brosesu brawddegau cymhleth. Er mwyn goresgyn cyfyngiadau rhaglenni tebyg blaenorol, adeiladodd y datblygwyr rwydwaith niwral modiwlaidd yn cynnwys sawl cydran. Mae'r rhain yn cynnwys modiwl prosesu iaith naturiol, modiwl dosrannu sgriptiau, a modiwl sy'n cynhyrchu animeiddiad.
I ddechrau, mae'r system yn dadansoddi'r testun ac yn trosi brawddegau cymhleth yn rhai syml. Ar ôl hyn, mae animeiddiad 3D yn cael ei greu. Ar gyfer gwaith, defnyddir llyfrgell o 52 o flociau animeiddiedig, ac mae'r rhestr wedi'i hehangu i 92 trwy ychwanegu elfennau tebyg. I greu animeiddiad, defnyddir injan gêm Unreal Engine, sy'n dibynnu ar wrthrychau a modelau wedi'u llwytho ymlaen llaw. O'r rhain, mae'r system yn dewis elfennau addas ac yn cynhyrchu fideo.
Er mwyn hyfforddi'r system, lluniodd yr ymchwilwyr set o ddisgrifiadau o 996 o elfennau a gymerwyd o fwy na 1000 o sgriptiau o IMSDb, SimplyScripts a ScriptORama5. Ar ôl hyn, cynhaliwyd profion ansoddol, lle cafodd 22 o gyfranogwyr gyfle i werthuso 20 animeiddiad. Ar yr un pryd, dywedodd 68% fod y system yn creu animeiddiad eithaf gweddus yn seiliedig ar y testunau mewnbwn.
Fodd bynnag, roedd y tîm yn cydnabod nad yw'r system yn berffaith. Nid yw ei restr o weithredoedd a gwrthrychau yn hollgynhwysfawr, ac weithiau nid yw symleiddio geirfa yn cyfateb i ferfau ag animeiddiadau tebyg. Mae'r ymchwilwyr yn bwriadu mynd i'r afael â'r diffygion hyn mewn gwaith yn y dyfodol.
Ffynhonnell: 3dnewyddion.ru