Disney's AI টেক্সট বর্ণনার উপর ভিত্তি করে কার্টুন তৈরি করে

পাঠ্য বিবরণের উপর ভিত্তি করে আসল ভিডিও তৈরি করে এমন নিউরাল নেটওয়ার্ক ইতিমধ্যেই বিদ্যমান। এবং যদিও তারা এখনও পুরোপুরি চলচ্চিত্র নির্মাতা বা অ্যানিমেটরদের প্রতিস্থাপন করতে সক্ষম নয়, এই দিকে ইতিমধ্যে অগ্রগতি রয়েছে। ডিজনি গবেষণা এবং Rutgers উন্নত একটি নিউরাল নেটওয়ার্ক যা একটি টেক্সট স্ক্রিপ্ট থেকে একটি রুক্ষ স্টোরিবোর্ড এবং ভিডিও তৈরি করতে পারে।

যেমন উল্লেখ করা হয়েছে, সিস্টেমটি প্রাকৃতিক ভাষার সাথে কাজ করে, যা এটিকে শিক্ষামূলক ভিডিও তৈরির মতো বেশ কয়েকটি ক্ষেত্রে ব্যবহার করার অনুমতি দেবে। এই সিস্টেমগুলি চিত্রনাট্যকারদের তাদের ধারণাগুলি কল্পনা করতেও সাহায্য করবে। একই সময়ে, এটি বলা হয়েছে যে লক্ষ্য লেখক এবং শিল্পীদের প্রতিস্থাপন করা নয়, তবে তাদের কাজকে আরও দক্ষ এবং কম ক্লান্তিকর করা।

বিকাশকারীরা বলছেন যে পাঠ্যকে অ্যানিমেশনে অনুবাদ করা সহজ কাজ নয় কারণ ইনপুট এবং আউটপুট ডেটার একটি নির্দিষ্ট কাঠামো নেই। অতএব, এই ধরনের বেশিরভাগ সিস্টেম জটিল বাক্য প্রক্রিয়া করতে পারে না। পূর্ববর্তী অনুরূপ প্রোগ্রামগুলির সীমাবদ্ধতা কাটিয়ে উঠতে, বিকাশকারীরা বেশ কয়েকটি উপাদান সমন্বিত একটি মডুলার নিউরাল নেটওয়ার্ক তৈরি করেছে। এর মধ্যে রয়েছে একটি প্রাকৃতিক ভাষা প্রক্রিয়াকরণ মডিউল, একটি স্ক্রিপ্ট পার্সিং মডিউল এবং একটি মডিউল যা অ্যানিমেশন তৈরি করে।

শুরুতে, সিস্টেমটি পাঠ্য বিশ্লেষণ করে এবং জটিল বাক্যগুলিকে সহজে অনুবাদ করে। এর পরে, একটি 3D অ্যানিমেশন তৈরি করা হয়। কাজের জন্য, 52টি অ্যানিমেটেড ব্লকের একটি লাইব্রেরি ব্যবহার করা হয়, যার তালিকাটি অনুরূপ উপাদান যোগ করে 92 তে প্রসারিত করা হয়েছে। অ্যানিমেশন তৈরি করতে, অবাস্তব ইঞ্জিন গেম ইঞ্জিন ব্যবহার করা হয়, যা প্রিলোড করা বস্তু এবং মডেলের উপর নির্ভর করে। এগুলি থেকে, সিস্টেম উপযুক্ত উপাদান নির্বাচন করে এবং একটি ভিডিও তৈরি করে।

সিস্টেমকে প্রশিক্ষণ দেওয়ার জন্য, গবেষকরা IMSDb, SimplyScripts এবং ScriptORama996 থেকে 1000টিরও বেশি স্ক্রিপ্ট থেকে নেওয়া 5টি উপাদানের বর্ণনার একটি সেট সংকলন করেছেন। এর পরে, গুণগত পরীক্ষা করা হয়েছিল, যেখানে 22 জন অংশগ্রহণকারীর 20 টি অ্যানিমেশন মূল্যায়ন করার সুযোগ ছিল। একই সময়ে, 68% বলেছেন যে সিস্টেমটি ইনপুট পাঠ্যের উপর ভিত্তি করে বেশ শালীন অ্যানিমেশন তৈরি করেছে।

তবে, দলটি স্বীকার করেছে যে সিস্টেমটি নিখুঁত নয়। এর ক্রিয়া এবং বস্তুর তালিকা সম্পূর্ণ নয় এবং কখনও কখনও আভিধানিক সরলীকরণ অনুরূপ অ্যানিমেশনের সাথে ক্রিয়াপদের সাথে মেলে না। গবেষকরা ভবিষ্যতের কাজে এই ত্রুটিগুলি সমাধান করতে চান।

উত্স: 3dnews.ru