Rezo neral ki kreye videyo orijinal ki baze sou deskripsyon tèks deja egziste. Ak byenke yo poko kapab ranplase konplètman sinema oswa animatè, deja gen pwogrè nan direksyon sa a. Disney Research ak Rutgers yon rezo neral ki ka kreye yon storyboard ki graj ak videyo ki soti nan yon script tèks.
Kòm te note, sistèm nan travay ak lang natirèl, ki pral pèmèt yo itilize li nan yon kantite domèn, tankou kreye videyo edikasyon. Sistèm sa yo pral ede senarist tou visualiser lide yo. An menm tan, yo deklare ke objektif la se pa ranplase ekriven ak atis, men fè travay yo pi efikas ak mwens fatigan.
Devlopè yo di ke tradui tèks nan animasyon se pa yon travay fasil paske done yo opinyon ak pwodiksyon pa gen yon estrikti fiks. Se poutèt sa, pifò sistèm sa yo pa ka trete fraz konplèks. Pou simonte limit yo nan pwogram anvan menm jan an, devlopè yo te bati yon rezo neral modilè ki gen ladan plizyè eleman. Men sa yo enkli yon modil pwosesis lang natirèl, yon modil analiz script, ak yon modil ki jenere animasyon.
Pou kòmanse, sistèm nan analize tèks la epi tradui fraz konplèks nan fraz ki senp. Apre sa, yon animasyon 3D kreye. Pou travay, yo itilize yon bibliyotèk 52 blòk anime, lis ki te elaji a 92 lè yo ajoute eleman ki sanble. Pou kreye animasyon, yo itilize motè jwèt Unreal Engine, ki depann sou objè ak modèl prechaje yo. Soti nan sa yo, sistèm nan chwazi eleman apwopriye ak jenere yon videyo.
Pou fòme sistèm nan, chèchè yo te konpile yon seri deskripsyon 996 eleman yo te pran nan plis pase 1000 scripts nan IMSDb, SimplyScripts ak ScriptORama5. Apre sa, tès kalitatif yo te fèt, kote 22 patisipan yo te gen opòtinite pou evalye 20 animasyon. An menm tan an, 68% te di ke sistèm nan kreye byen desan animasyon ki baze sou tèks yo D '.
Sepandan, ekip la te rekonèt ke sistèm nan pa pafè. Lis aksyon ak objè li yo pa konplè, epi pafwa senplifikasyon leksikal pa matche ak vèb ak animasyon menm jan an. Chèchè yo gen entansyon adrese enpèfeksyon sa yo nan travay nan lavni.
Sous: 3dnews.ru