Amazon CC BY 4.0 lisenziyası altında "MASSIVE" (Yuvaların Doldurulması, Məqsədlərin Təsnifatı və Virtual Asistanın Qiymətləndirilməsi üçün Çoxdilli Amazon SLURP) məlumat dəstini, maşın öyrənmə sistemləri üçün modelləri və öz modellərinizi öyrətmək üçün alətləri nəşr etdi. təbii dil haqqında məlumatları anlamaq (NLU, Natural Language Understanding). Dəstə 51 dil üçün hazırlanmış bir milyondan çox annotasiya edilmiş və təsnifləşdirilmiş mətn ifadələri daxildir.
Əvvəlcə ingilis dili üçün mövcud olan SLURP kolleksiyası peşəkar tərcüməçilərdən istifadə etməklə 50 başqa dildə lokallaşdırılmış MASSIVE dəstinin yaradılması üçün istinad kimi istifadə edilmişdir. Alexa-nın təbii dil anlayışı (NLU) texnologiyası əvvəlcə nitqi mətnə çevirir, sonra istifadəçinin sualının mahiyyətini müəyyən etmək üçün açar sözlərin mövcudluğunu təhlil edən mətnə çoxsaylı NLU modellərini tətbiq edir.
Dəsti yaratmaq və dərc etmək məqsədlərindən biri səsli köməkçiləri eyni anda bir neçə dildə məlumatları emal etməyə uyğunlaşdırmaq, həmçinin üçüncü tərəf tərtibatçılarını səsli köməkçilərin imkanlarını genişləndirən proqram və xidmətlər yaratmağa həvəsləndirməkdir. Tərtibatçıların diqqətini cəlb etmək üçün Amazon dərc edilmiş məlumat dəstindən istifadə edərək ən yaxşı ümumi modeli yaratmaq üçün müsabiqə başlatdı.
Hazırda səsli köməkçilər yalnız bir neçə dili dəstəkləyir və müəyyən bir dilə bağlı maşın öyrənmə modellərindən istifadə edirlər. MASSIVE layihəsi müxtəlif dillərdə məlumatları təhlil etmək və emal etmək qabiliyyətinə malik universal modellər və maşın öyrənmə sistemləri yaratmaqla bu çatışmazlığı aradan qaldırmaq məqsədi daşıyır.
Mənbə: opennet.ru