অ্যামাজন 51টি ভাষায় স্পিচ কম্প্রিহেনশন ডেটাসেট প্রকাশ করে

Amazon একটি CC BY 4.0 লাইসেন্সের অধীনে "ম্যাসিভ" (স্লট ফিলিং, ইন্টেন্ট ক্লাসিফিকেশন, এবং ভার্চুয়াল-সহকারী মূল্যায়নের জন্য বহুভাষিক আমাজন SLURP) ডেটাসেট, মেশিন লার্নিং সিস্টেমের মডেল এবং আপনার নিজস্ব মডেলগুলিকে প্রশিক্ষণের জন্য সরঞ্জামগুলি প্রকাশ করেছে যা ব্যবহার করা যেতে পারে। প্রাকৃতিক ভাষা সম্পর্কে তথ্য বুঝুন (NLU, Natural Language Understanding)। সেটটিতে 51টি ভাষার জন্য প্রস্তুত করা এক মিলিয়নেরও বেশি টীকা এবং শ্রেণীবদ্ধ পাঠ্য উচ্চারণ রয়েছে।

SLURP সংগ্রহটি, যা মূলত ইংরেজির জন্য উপলব্ধ ছিল, MASSIVE সেট তৈরির জন্য একটি রেফারেন্স হিসাবে ব্যবহৃত হয়েছিল, যা পেশাদার অনুবাদকদের ব্যবহার করে 50টি অন্যান্য ভাষায় স্থানীয়করণ করা হয়েছিল। আলেক্সার ন্যাচারাল ল্যাঙ্গুয়েজ বোঝার (NLU) প্রযুক্তি প্রথমে বক্তৃতাকে পাঠ্যে রূপান্তরিত করে, তারপরে একাধিক NLU মডেল প্রয়োগ করে পাঠ্যটিতে যা ব্যবহারকারীর প্রশ্নের সারমর্ম নির্ধারণ করতে কীওয়ার্ডের উপস্থিতি বিশ্লেষণ করে।

সেটটি তৈরি এবং প্রকাশ করার একটি লক্ষ্য হল ভয়েস সহকারীকে একযোগে একাধিক ভাষায় তথ্য প্রক্রিয়া করার জন্য মানিয়ে নেওয়া, সেইসাথে ভয়েস সহকারীর ক্ষমতা প্রসারিত করে এমন অ্যাপ্লিকেশন এবং পরিষেবাগুলি তৈরি করতে তৃতীয় পক্ষের বিকাশকারীদের উত্সাহিত করা। বিকাশকারীদের দৃষ্টি আকর্ষণ করার জন্য, অ্যামাজন একটি প্রকাশিত ডেটাসেট ব্যবহার করে সেরা জেনেরিক মডেল তৈরি করার জন্য একটি প্রতিযোগিতা চালু করেছে।

বর্তমানে, ভয়েস সহকারী শুধুমাত্র কয়েকটি ভাষা সমর্থন করে এবং একটি নির্দিষ্ট ভাষার সাথে সংযুক্ত মেশিন লার্নিং মডেল ব্যবহার করে। MASSIVE প্রকল্পের লক্ষ্য হল বিভিন্ন ভাষায় তথ্য পার্সিং এবং প্রক্রিয়াকরণ করতে সক্ষম সার্বজনীন মডেল এবং মেশিন লার্নিং সিস্টেম তৈরি করে এই ঘাটতি দূর করা।

উত্স: opennet.ru