Misi Microsoft nyaéta pikeun nguatkeun unggal jalma sareng organisasi di pangeusina pikeun ngahontal langkung seueur. Industri média mangrupikeun conto anu saé pikeun ngajantenkeun misi ieu kanyataan. Urang hirup dina jaman dimana langkung seueur eusi anu diciptakeun sareng dikonsumsi, ku seueur cara sareng langkung seueur alat. Di IBC 2019, kami ngabagikeun inovasi pangénggalna anu urang damel sareng kumaha aranjeunna tiasa ngabantosan ngarobih pangalaman média anjeun.
Rincian handapeun cut!
Kaca ieu dihurungkeun
Video Indexer ayeuna ngadukung animasi sareng kontén multibasa
Taun ka tukang di IBC kami meunang pangajén , sareng taun ieu janten langkung saé. Video Indexer otomatis nimba inpormasi sareng metadata tina file media, sapertos kecap anu diucapkeun, raray, émosi, topik, sareng merek, sareng anjeun henteu kedah janten ahli mesin diajar pikeun ngagunakeunana.
Panawaran panganyarna kami kalebet sawangan dua fitur anu dipilarian pisan sareng dibédakeun - pengenalan karakter animasi sareng transkripsi ucapan multibasa - ogé sababaraha tambahan kana modél anu tos aya ayeuna di Video Indexer.
Pangwanoh Karakter animasi
Eusi animasi mangrupikeun salah sahiji jinis eusi anu pang populerna, tapi modél visi komputer standar anu dirancang pikeun mikawanoh rupa manusa henteu tiasa dianggo kalayan saé, khususna upami eusina ngandung karakter tanpa fitur raray manusa. Versi sawangan anyar ngagabungkeun Video Indexer sareng jasa Azure Custom Vision Microsoft, nganteurkeun sakumpulan modél énggal anu otomatis ngadeteksi sareng ngakelompokkeun karakter animasi sareng ngajantenkeun aranjeunna gampang labél sareng ngakuan ngagunakeun modél visi khusus terpadu.
Modélna diintegrasikeun kana pipa tunggal, ngamungkinkeun saha waé ngagunakeun jasa éta tanpa pangaweruh mesin diajar. Hasilna sayogi ngalangkungan portal Video Indexer tanpa kode atanapi via REST API pikeun integrasi gancang kana aplikasi anjeun nyalira.
Kami ngawangun modél ieu pikeun dianggo sareng karakter animasi sareng sababaraha konsumen anu nyayogikeun kontén animasi nyata pikeun latihan sareng uji. Nilai fungsionalitas anyar ieu ogé disimpulkeun ku Andy Gutteridge, diréktur senior téknologi studio sareng pasca produksi di Viacom International Media Networks, anu mangrupikeun salah sahiji panyadia data: "Tambahan panemuan kontén animasi anu kuat ku AI bakal ngamungkinkeun kami pikeun gancang sareng éfisién milarian sareng katalog metadata karakter tina eusi perpustakaan urang.
Anu paling penting, éta bakal masihan tim kreatif urang kamampuan pikeun langsung mendakan kontén anu diperyogikeun, ngaminimalkeun waktos anu dihabiskeun pikeun ngatur média sareng ngamungkinkeun aranjeunna difokuskeun kréativitas.
Anjeun bisa ngamimitian meunang acquainted jeung pangakuan karakter animasi jeung .
Idéntifikasi sareng transkripsi eusi dina sababaraha basa
Sababaraha sumber média, sapertos warta, babad sareng wawancara, ngandung rékaman jalma anu nyarios basa anu béda. Kaseueuran kamampuan pidato-ka-téks anu tos aya meryogikeun basa pangenal audio dispésialisasikeun sateuacanna, janten hésé pikeun nranskripsikeun pidéo multibasa.
Fitur Idéntifikasi Basa Diucapkeun Otomatis anyar kami pikeun sababaraha jinis eusi ngagunakeun téknologi pembelajaran mesin pikeun ngaidentipikasi basa anu aya dina aset média. Sakali dideteksi, unggal ruas basa sacara otomatis ngaliwat prosés transkripsi dina basa anu luyu, teras sadaya bagéan digabungkeun kana file transkripsi multi-basa tunggal.
Transkrip anu dihasilkeun sayogi salaku bagian tina kaluaran JSON tina Video Indexer sareng salaku file subjudul. Transkrip kaluaran ogé terpadu sareng Azure Search, ngamungkinkeun anjeun langsung milarian bagéan basa anu béda dina pidéo anjeun. Salaku tambahan, transkripsi multibasa sayogi nalika damel sareng portal Video Indexer, ku kituna anjeun tiasa ningali transkrip sareng basa anu diidentifikasi dina waktosna, atanapi ngaluncat ka tempat khusus dina pidéo pikeun unggal basa sareng ningali transkripsi multibasa salaku caption nalika pidéo diputar. Anjeun ogé tiasa narjamahkeun téks anu ditampi kana salah sahiji 54 basa anu sayogi ngalangkungan portal sareng API.
Diajar langkung seueur ngeunaan fitur pangenalan eusi multibasa anyar sareng kumaha éta dianggo dina Video Indexer .
Modél anu diropéa sareng ningkat tambahan
Kami ogé nambihan modél énggal kana Video Indexer sareng ningkatkeun anu parantos aya, kalebet anu dijelaskeun di handap.
Extracting éntitas pakait sareng jalma jeung tempat
Kami parantos ngalegaan kamampuan panemuan merek anu tos aya pikeun kalebet nami sareng lokasi anu terkenal, sapertos Menara Eiffel di Paris sareng Big Ben di London. Nalika aranjeunna muncul dina transkrip anu dihasilkeun atanapi dina layar nganggo pangenal karakter optik (OCR), inpormasi anu relevan bakal ditambah. Kalayan fitur anyar ieu, anjeun tiasa milarian sadaya jalma, tempat, sareng merek anu muncul dina pidéo sareng ningali detil ngeunaan aranjeunna, kalebet liang waktos, déskripsi, sareng tautan kana mesin pencari Bing kanggo inpormasi anu langkung lengkep.
Modél deteksi pigura pikeun redaktur
Fitur anyar ieu nambihan sakumpulan "tag" kana metadata anu napel dina pigura individu dina detil JSON pikeun ngagambarkeun jinis redaksina (contona, shot lebar, shot sedeng, close-up, close-up ekstrim, dua nembak, sababaraha jalma. , outdoor, indoor, jsb). Karakteristik tipe shot ieu mangpaat nalika ngédit video pikeun klip sareng trailer, atanapi nalika milarian gaya shot khusus pikeun tujuan artistik.
Deteksi jinis pigura dina Video Indexer.
Enhanced IPTC pemetaan granularity
Modél deteksi topik urang nangtukeun topik video dumasar kana transkripsi, Optical Character Recognition (OCR), sareng selebritis anu dideteksi, sanajan topikna henteu dijelaskeun sacara eksplisit. Kami ngapetakeun topik anu dideteksi ieu kana opat daérah klasifikasi: Wikipedia, Bing, IPTC, sareng IAB. Peningkatan ieu ngamungkinkeun urang ngalebetkeun klasifikasi IPTC tingkat kadua.
Ngamangpaatkeun perbaikan ieu sagampangna ngindeks ulang perpustakaan Video Indexer anjeun ayeuna.
fungsionalitas live streaming anyar
Dina sawangan Azure Media Services, kami ogé nawiskeun dua fitur énggal pikeun streaming langsung.
Transkripsi real-time anu dikuatkeun AI nyandak streaming langsung ka tingkat salajengna
Ngagunakeun Azure Media Services pikeun live streaming, Anjeun ayeuna bisa nampa hiji aliran kaluaran nu ngawengku hiji lagu téks dihasilkeun otomatis salian eusi audio jeung video. Téks didamel nganggo transkripsi audio sacara real-time dumasar kana intelijen buatan. Téhnik khusus diterapkeun sateuacan sareng saatos konversi ucapan-ka-téks pikeun ningkatkeun hasil. Lagu téks rangkep dina IMSC1, TTML atanapi WebVTT, gumantung kana naha éta disadiakeun dina DASH, HLS CMAF atanapi HLS TS.
Encoding garis real-time pikeun saluran OTT 24/7
Nganggo API v3 kami, anjeun tiasa nyiptakeun, ngatur sareng nyiarkeun saluran OTT (over-the-top), sareng nganggo sadaya fitur Azure Media Services sapertos live video on demand (VOD, video on demand), bungkusan sareng manajemén hak digital ( DRM, manajemén hak digital).
Pikeun ningali versi sawangan ngeunaan fitur ieu, mangga buka .
Kamampuh generasi pakét anyar
Rojongan pikeun lagu déskripsi audio
Eusi siaran dina saluran siaran sering gaduh lagu audio sareng katerangan verbal ngeunaan naon anu lumangsung dina layar salian ti sinyal audio biasa. Hal ieu ngajadikeun program leuwih diaksés ka pemirsa impaired visually, utamana lamun eusi utamana visual. Anyar ngidinan Anjeun pikeun annotate salah sahiji lagu audio salaku lagu déskripsi audio (AD, déskripsi audio), sahingga pamaén sangkan lagu AD sadia pikeun pemirsa.
Nyelapkeun metadata ID3
Pikeun nyelapkeun iklan atanapi acara metadata khusus ka pamuter klien, penyiar sering nganggo metadata waktos anu dipasang dina pidéo. Salian modeu sinyal SCTE-35, ayeuna urang ogé ngadukung , ditetepkeun ku pamekar aplikasi pikeun dianggo ku aplikasi klien.
Mitra Microsoft Azure nunjukkeun solusi tungtung-ka-tungtung
ngenalkeun Bitmovin Video Encoding sareng Bitmovin Video Player pikeun Microsoft Azure. Konsumén ayeuna tiasa ngungkit solusi encoding sareng playout ieu di Azure sareng nyandak kauntungan tina fitur canggih sapertos encoding tilu tahap, dukungan codec AV1 / VC, subtitle multibasa, sareng analitik pidéo anu tos terintegrasi pikeun QoS, iklan, sareng pelacak video.
nunjukkeun Platform Manajemén Lifecycle Pamaké na dina Azure. Salaku panyayogikeun solusi manajemén pendapatan sareng siklus kahirupan palanggan, Evergent nganggo Azure AI pikeun ngabantosan panyadia hiburan premium ningkatkeun akuisisi sareng ingetan palanggan ku cara nyiptakeun pakét jasa anu disasarkeun sareng nawaran dina titik kritis dina siklus kahirupan palanggan.
bakal nunjukkeun jasa routing média berbasis awan anu cerdas, SRT Hub, anu ngabantosan para nasabah ngarobih alur kerja tungtung-ka-tungtung ngagunakeun sareng ngarobih alur kerja sareng Hublets ti Avid, Telestream, Wowza, Cinegy sareng Make.tv.
geus ngembangkeun suite sahiji layanan média siaran-grade dina platform Azure pikeun satelit sarta junun konsumén jasa média. SES bakal nunjukkeun solusi pikeun layanan playout anu diurus pinuh, kalebet master playout, playout lokal, panemuan sareng ngagantian iklan, sareng encoding multi-kanal 24x7 kualitas luhur dina Azure.
ngajadikeun parabot awan merenah tur téhnologi automation signature sadia on Azure. Panawaran ieu bakal ngagampangkeun organisasi média sacara otomatis nambihan terjemahan, kalebet terjemahan basa asing, kana alur kerja pidéo langsung sareng offline dina Azure.
pausahaan internasional , Perusahaan jasa téknologi, parantos ngahijikeun platform OTT SaaS TEPlay kana Azure Media Services pikeun nganteurkeun kontén OTT tina méga. Tata Elxsi ogé parantos nyayogikeun solusi ngawaskeun kualitas Falcon Eye of experience (QoE) ka Microsoft Azure, nyayogikeun analitik sareng métrik pikeun nyandak kaputusan.
nyieun platform streaming na sadia on Azure salaku release béta. Verizon Media Platform mangrupikeun solusi OTT anu diurus kelas perusahaan anu kalebet DRM, sisipan iklan, sesi pribadi hiji-ka-hiji, ngagantian eusi dinamis, sareng pangiriman video. Integrasi éta nyederhanakeun alur kerja, dukungan sareng skala global, sareng muka konci sababaraha kamampuan unik anu aya dina Azure.
sumber: www.habr.com