Disney को AI ले पाठ विवरणहरूमा आधारित कार्टुनहरू सिर्जना गर्दछ

पाठ विवरणहरूमा आधारित मूल भिडियोहरू सिर्जना गर्ने तंत्रिका नेटवर्कहरू पहिले नै अवस्थित छन्। र यद्यपि तिनीहरू अझै पूर्ण रूपमा फिल्म निर्माता वा एनिमेटरहरू प्रतिस्थापन गर्न सक्षम छैनन्, यस दिशामा पहिले नै प्रगति छ। डिज्नी अनुसन्धान र Rutgers विकसित एउटा न्यूरल नेटवर्क जसले पाठ स्क्रिप्टबाट कुनै नराम्रो स्टोरीबोर्ड र भिडियो सिर्जना गर्न सक्छ।

उल्लेख गरिए अनुसार, प्रणालीले प्राकृतिक भाषासँग काम गर्दछ, जसले यसलाई शैक्षिक भिडियोहरू सिर्जना गर्ने जस्ता धेरै क्षेत्रमा प्रयोग गर्न अनुमति दिनेछ। यी प्रणालीहरूले पटकथा लेखकहरूलाई उनीहरूको विचारहरू कल्पना गर्न पनि मद्दत गर्नेछ। एकै साथ, यो भनिएको छ कि लक्ष्य लेखक र कलाकारहरूलाई प्रतिस्थापन गर्ने होइन, तर तिनीहरूको कामलाई अझ प्रभावकारी र कम थकाउने बनाउनु हो।

इनपुट र आउटपुट डाटाको निश्चित संरचना नभएकाले पाठलाई एनिमेसनमा अनुवाद गर्न सजिलो काम नभएको विकासकर्ताहरू बताउँछन्। त्यसकारण, धेरै जसो प्रणालीहरूले जटिल वाक्यहरू प्रशोधन गर्न सक्दैनन्। अघिल्लो समान कार्यक्रमहरूको सीमितताहरू हटाउन, विकासकर्ताहरूले धेरै कम्पोनेन्टहरू मिलेर मोड्युलर न्यूरल नेटवर्क निर्माण गरे। यसमा प्राकृतिक भाषा प्रशोधन मोड्युल, लिपि पार्सिङ मोड्युल, र एनिमेसन उत्पन्न गर्ने मोड्युल समावेश छ।

सुरुमा, प्रणालीले पाठको विश्लेषण गर्छ र जटिल वाक्यहरूलाई सरलमा अनुवाद गर्छ। यस पछि, एक 3D एनिमेसन सिर्जना गरिन्छ। कामको लागि, 52 एनिमेटेड ब्लकहरूको पुस्तकालय प्रयोग गरिन्छ, जसको सूची समान तत्वहरू थपेर 92 मा विस्तार गरिएको थियो। एनिमेसन सिर्जना गर्न, अवास्तविक इन्जिन खेल इन्जिन प्रयोग गरिन्छ, जुन प्रीलोड गरिएका वस्तुहरू र मोडेलहरूमा निर्भर हुन्छ। यीबाट, प्रणालीले उपयुक्त तत्वहरू छान्छ र भिडियो उत्पन्न गर्छ।

प्रणालीलाई प्रशिक्षित गर्न, शोधकर्ताहरूले IMSDb, SimplyScripts र ScriptORama996 बाट 1000 भन्दा बढी लिपिहरूबाट लिइएका 5 तत्वहरूको विवरणहरूको सेट कम्पाइल गरे। यस पछि, गुणात्मक परीक्षणहरू गरियो, जसमा 22 सहभागीहरूले 20 एनिमेसनहरू मूल्याङ्कन गर्ने अवसर पाए। एकै समयमा, 68% ले भन्नुभयो कि प्रणालीले इनपुट पाठहरूमा आधारित एकदम सभ्य एनिमेसन सिर्जना गर्यो।

यद्यपि, टोलीले प्रणाली पूर्ण नभएको स्वीकार गर्यो। यसको कार्य र वस्तुहरूको सूची पूर्ण छैन, र कहिलेकाहीं लेक्सिकल सरलीकरण समान एनिमेसनहरूसँग क्रियाहरूसँग मेल खाँदैन। अन्वेषकहरूले भविष्यमा काममा यी कमीहरूलाई सम्बोधन गर्ने इरादा राख्छन्।

स्रोत: 3dnews.ru