Microsoft-ning vazifasi sayyoradagi har bir inson va tashkilotga ko'proq erishish uchun imkoniyatlar berishdir. Media sanoati bu missiyani amalga oshirishning ajoyib namunasidir. Biz ko'proq kontent, ko'proq usullar va ko'proq qurilmalarda yaratilayotgan va iste'mol qilinadigan davrda yashayapmiz. IBC 2019 ko‘rgazmasida biz ustida ishlayotgan eng so‘nggi yangiliklar va ular sizning media tajribangizni o‘zgartirishga qanday yordam berishi mumkinligi bilan o‘rtoqlashdik.
Tafsilotlar kesim ostida!
Bu sahifa yoqilgan
Video Indexer endi animatsiya va ko'p tilli kontentni qo'llab-quvvatlaydi
O'tgan yili IBCda biz mukofotni qo'lga kiritdik , va bu yil u yanada yaxshilandi. Video Indexer og'zaki so'zlar, yuzlar, his-tuyg'ular, mavzular va brendlar kabi media fayllardan ma'lumot va metama'lumotlarni avtomatik ravishda ajratib oladi va undan foydalanish uchun siz mashinani o'rganish bo'yicha mutaxassis bo'lishingiz shart emas.
Bizning eng soʻnggi takliflarimiz orasida juda koʻp talab qilinadigan va tabaqalashtirilgan ikkita funksiya – animatsion belgilarni aniqlash va koʻp tilli nutq transkripsiyasini oldindan koʻrish, shuningdek, Video Indexer’da mavjud boʻlgan mavjud modellarga bir nechta qoʻshimchalar kiradi.
Animatsion belgilarni aniqlash
Animatsiyalangan kontent eng ommabop kontent turlaridan biri hisoblanadi, lekin inson yuzlarini tanib olish uchun moʻljallangan standart kompyuter koʻrish modellari u bilan yaxshi ishlamaydi, ayniqsa kontentda inson yuz xususiyatlariga ega boʻlmagan belgilar mavjud boʻlsa. Oldindan ko‘rishning yangi versiyasi Video Indexer-ni Microsoft-ning Azure Custom Vision xizmati bilan birlashtirib, animatsion belgilarni avtomatik ravishda aniqlaydigan va guruhlaydigan hamda o‘rnatilgan maxsus ko‘rish modellari yordamida ularni belgilash va tanib olishni osonlashtiradigan yangi modellar to‘plamini taqdim etadi.
Modellar bitta quvur liniyasiga birlashtirilgan bo'lib, har kimga mashinani o'rganish bo'yicha hech qanday bilimsiz xizmatdan foydalanish imkonini beradi. Natijalar kodsiz Video Indexer portali yoki o'z ilovalaringizga tezkor integratsiya qilish uchun REST API orqali mavjud.
Biz ushbu modellarni o'qitish va sinovdan o'tkazish uchun haqiqiy animatsion kontentni taqdim etgan ba'zi iste'molchilar bilan birga animatsion belgilar bilan ishlash uchun yaratdik. Yangi funksiyaning qiymatini Viacom International Media Networks kompaniyasining studiya texnologiyalari va post-produktsiyasi bo‘yicha katta direktori Endi Gutterij yaxshi sarhisob qildi, u ma’lumotlar provayderlaridan biri edi: “Aqlli sun’iy intellekt yordamida kuchli animatsion kontentni topish imkonini beradi. kutubxonamiz tarkibidagi belgilar metama'lumotlarini tez va samarali ravishda topish va kataloglash.
Eng muhimi, bu bizning ijodiy jamoalarimizga kerakli kontentni bir zumda topish imkoniyatini beradi, ommaviy axborot vositalarini boshqarish uchun sarflanadigan vaqtni kamaytiradi va ijodkorlikka e’tibor qaratish imkonini beradi”.
Siz animatsion belgilarni tanib olish bilan tanishishni boshlashingiz mumkin .
Ko'p tillarda kontentni aniqlash va transkripsiya qilish
Yangiliklar, xronikalar va intervyular kabi ba'zi media resurslarida turli tillarda so'zlashuvchi odamlarning yozuvlari mavjud. Mavjud nutqni matnga aylantirish imkoniyatlarining aksariyati audioni aniqlash tilini oldindan belgilashni talab qiladi, bu esa ko‘p tilli videolarni transkripsiya qilishni qiyinlashtiradi.
Har xil turdagi kontent uchun yangi Avtomatik nutqiy tilni identifikatsiya qilish funksiyamiz media aktivlarida topilgan tillarni aniqlash uchun mashinani o'rganish texnologiyasidan foydalanadi. Aniqlangandan so'ng, har bir til segmenti avtomatik ravishda tegishli tilda transkripsiya jarayonidan o'tadi va keyin barcha segmentlar bitta ko'p tilli transkripsiya fayliga birlashtiriladi.
Olingan transkript Video Indexerning JSON chiqishining bir qismi va subtitr fayllari sifatida mavjud. Chiqish transkripti, shuningdek, Azure Search bilan birlashtirilgan bo'lib, videolaringizdagi turli til segmentlarini darhol qidirishga imkon beradi. Bundan tashqari, Video Indexer portali bilan ishlashda ko‘p tilli transkripsiya mavjud, shuning uchun siz vaqt o‘tishi bilan transkriptni va aniqlangan tilni ko‘rishingiz yoki har bir til uchun videoning ma’lum joylariga o‘tishingiz va ko‘p tilli transkripsiyani video ijro etilayotganda taglavha sifatida ko‘rishingiz mumkin. Shuningdek, siz portal va API orqali olingan matnni 54 ta tilning istalganiga tarjima qilishingiz mumkin.
Ko‘p tilli kontentni aniqlashning yangi funksiyasi va undan Video Indexer’da qanday foydalanilishi haqida ko‘proq bilib oling .
Qo'shimcha yangilangan va takomillashtirilgan modellar
Shuningdek, biz Video Indexer-ga yangi modellarni qo‘shmoqdamiz va mavjudlarini, jumladan quyida tavsiflanganlarini yaxshilayapmiz.
Odamlar va joylar bilan bog'liq ob'ektlarni chiqarish
Parijdagi Eyfel minorasi va Londondagi Big Ben kabi taniqli nomlar va joylarni o‘z ichiga olish uchun mavjud brendni kashf qilish imkoniyatlarini kengaytirdik. Ular yaratilgan transkriptda yoki optik belgilarni aniqlash (OCR) yordamida ekranda paydo bo'lganda, tegishli ma'lumotlar qo'shiladi. Ushbu yangi xususiyat yordamida siz videoda paydo bo'lgan barcha odamlar, joylar va brendlarni qidirishingiz va ular haqidagi tafsilotlarni, jumladan, vaqt oralig'i, tavsiflar va qo'shimcha ma'lumot olish uchun Bing qidiruv tizimiga havolalarni ko'rishingiz mumkin.
Muharrir uchun ramka aniqlash modeli
Bu yangi xususiyat JSON tafsilotlaridagi alohida freymlarga biriktirilgan metamaʼlumotlarga ularning tahririy turini koʻrsatish uchun “teglar” toʻplamini qoʻshadi (masalan, keng surat, oʻrta surat, yaqindan, ekstremal yaqindan, ikkita kadr, bir nechta odam). , tashqi, ichki va boshqalar). Ushbu kadrlar turining xususiyatlari kliplar va treylerlar uchun videoni tahrirlashda yoki badiiy maqsadlar uchun muayyan suratga olish uslubini izlashda foydalidir.
Video Indexer-da ramka turini aniqlash.
Kengaytirilgan IPTC xaritalash granularligi
Mavzuni aniqlash modelimiz video mavzusini transkripsiya, belgilarni optik aniqlash (OCR) va aniqlangan taniqli shaxslar asosida aniqlaydi, hatto mavzu aniq koʻrsatilmagan boʻlsa ham. Biz ushbu aniqlangan mavzularni to'rtta tasniflash sohasiga ajratamiz: Vikipediya, Bing, IPTC va IAB. Ushbu takomillashtirish bizga ikkinchi darajali IPTC tasnifini kiritish imkonini beradi.
Ushbu yaxshilanishlardan foydalanish hozirgi Video Indexer kutubxonangizni qayta indekslash kabi oson.
Yangi jonli efir funksiyasi
Azure Media xizmatlarini oldindan ko'rishda biz jonli translatsiya uchun ikkita yangi xususiyatni ham taklif qilmoqdamiz.
Sun'iy intellekt asosida ishlaydigan real vaqt transkripsiyasi jonli translyatsiyani keyingi bosqichga olib chiqadi
Jonli translatsiya uchun Azure Media xizmatlaridan foydalanib, endi audio va video kontentga qo'shimcha ravishda avtomatik ravishda yaratilgan matn trekni o'z ichiga olgan chiqish oqimini qabul qilishingiz mumkin. Matn sun'iy intellektga asoslangan real vaqtda audio transkripsiya yordamida yaratilgan. Natijalarni yaxshilash uchun nutqni matnga aylantirishdan oldin va keyin maxsus usullar qo'llaniladi. Matn treki DASH, HLS CMAF yoki HLS TS da taqdim etilganligiga qarab, IMSC1, TTML yoki WebVTT da paketlangan.
24/7 OTT kanallari uchun real vaqtda chiziq kodlash
Bizning v3 API-larimizdan foydalanib, siz OTT (yuqori) kanallarni yaratishingiz, boshqarishingiz va translyatsiya qilishingiz hamda Azure Media xizmatlarining boshqa barcha funksiyalaridan foydalanishingiz mumkin, masalan, talab boʻyicha jonli video (VOD, talab boʻyicha video), qadoqlash va raqamli huquqlarni boshqarish ( DRM, raqamli huquqlarni boshqarish).
Ushbu xususiyatlarning oldindan ko'rish versiyalarini ko'rish uchun tashrif buyuring .
Yangi paketlarni yaratish imkoniyatlari
Audio tavsif treklarini qo'llab-quvvatlash
Eshittirish kanallari orqali translyatsiya qilinadigan kontent ko'pincha oddiy audio signalga qo'shimcha ravishda ekranda sodir bo'layotgan voqealarni og'zaki tushuntirishlari bilan audio trekka ega. Bu dasturlarni ko'rish qobiliyati zaif tomoshabinlar uchun qulayroq qiladi, ayniqsa kontent birinchi navbatda ingl. Yangi audio treklardan birini audio tavsif treki (AD, audio tavsifi) sifatida izohlash imkonini beradi, bu esa pleyerlarga AD trekini tomoshabinlar uchun ochiq qilish imkonini beradi.
ID3 metamaʼlumotlari kiritilmoqda
Mijoz pleyeriga reklama yoki moslashtirilgan metama'lumotlar hodisalarini kiritish uchun signal berish uchun eshittirishchilar ko'pincha videoga o'rnatilgan vaqtli metama'lumotlardan foydalanadilar. SCTE-35 signalizatsiya rejimlaridan tashqari, biz hozir ham qo'llab-quvvatlaymiz , mijoz ilovasi tomonidan foydalanish uchun dastur ishlab chiqaruvchisi tomonidan belgilangan.
Microsoft Azure hamkorlari yakuniy yechimlarni namoyish etadi
Microsoft Azure uchun Bitmovin Video Encoding va Bitmovin Video Player-ni taqdim etadi. Mijozlar endi Azure-da ushbu kodlash va oʻynatish yechimlaridan foydalanishlari va uch bosqichli kodlash, AV1/VC kodeklarini qoʻllab-quvvatlash, koʻp tilli subtitrlar va QoS, reklama va video kuzatuvi uchun oldindan integratsiyalangan video tahlillari kabi ilgʻor funksiyalardan foydalanishlari mumkin.
Azure-da o'zining foydalanuvchi hayot aylanishini boshqarish platformasini namoyish etadi. Daromadlar va mijozlarning hayot aylanishini boshqarish yechimlari bo‘yicha yetakchi provayder sifatida Evergent premium ko‘ngilochar provayderlarga mijozlar hayotining muhim nuqtalarida maqsadli xizmat paketlari va takliflarini yaratish orqali mijozlarni jalb qilish va ushlab turishni yaxshilashga yordam berish uchun Azure AI-dan foydalanadi.
O'zining bulutga asoslangan aqlli media marshrutlash xizmati SRT Hubni namoyish etadi, bu mijozlarga ish oqimlarini oxirigacha o'zgartirishga yordam beradi. va Avid, Telestream, Wowza, Cinegy va Make.tv dan Hublets bilan ish oqimlarini o'zgartirish.
sun'iy yo'ldosh va boshqariladigan media xizmatlari mijozlari uchun Azure platformasida translyatsiya darajasidagi media xizmatlari to'plamini ishlab chiqdi. SES toʻliq boshqariladigan oʻyin xizmatlari, jumladan, asosiy oʻyin, mahalliylashtirilgan oʻyin, reklamani topish va almashtirish hamda Azure’da real vaqtda 24x7 koʻp kanalli kodlash uchun yechimlarni namoyish etadi.
qulay bulut vositalari va imzo avtomatlashtirish texnologiyasini Azure-da mavjud qiladi. Ushbu takliflar media tashkilotlari uchun Azure’dagi jonli va oflayn video ish oqimlariga avtomatik ravishda subtitrlar, shu jumladan chet tilidagi subtitrlarni qo‘shishni osonlashtiradi.
xalqaro kompaniya , texnologiya xizmatlari kompaniyasi bulutdan OTT kontentini yetkazib berish uchun TEPlay OTT SaaS platformasini Azure Media Services-ga birlashtirdi. Tata Elxsi, shuningdek, qaror qabul qilish uchun tahlil va o'lchovlarni taqdim etuvchi Falcon Eye tajribasi sifatini (QoE) monitoringi yechimini Microsoft Azure-ga olib keldi.
o'zining striming platformasini Azure-da beta-versiya sifatida taqdim etmoqda. Verizon Media Platformasi korporativ darajadagi boshqariladigan OTT yechimi boʻlib, u DRM, reklama kiritish, shaxsiylashtirilgan seanslar, dinamik tarkibni almashtirish va video yetkazib berishni oʻz ichiga oladi. Integrasiya ish jarayonlarini, global qo‘llab-quvvatlashni va miqyosni soddalashtiradi hamda Azure-da topilgan ba’zi noyob imkoniyatlarni ochadi.
Manba: www.habr.com