Microsoft misija ir dot iespÄju ikvienam planÄtas cilvÄkam un organizÄcijai sasniegt vairÄk. Mediju nozare ir lielisks piemÄrs, kÄ padarÄ«t Å”o misiju par realitÄti. MÄs dzÄ«vojam laikmetÄ, kad tiek radÄ«ts un patÄrÄts vairÄk satura, vairÄkos veidos un vairÄkÄs ierÄ«cÄs. IBC 2019 mÄs dalÄ«jÄmies ar jaunÄkajiem jauninÄjumiem, pie kuriem strÄdÄjam, un to, kÄ tie var palÄ«dzÄt pÄrveidot jÅ«su mediju pieredzi.
SÄ«kÄka informÄcija zem griezuma!
Å Ä« lapa ir ieslÄgta
Video indeksÄtÄjs tagad atbalsta animÄciju un daudzvalodu saturu
PagÄjuÅ”ajÄ gadÄ IBC mÄs ieguvÄm savu balvu
MÅ«su jaunÄkie piedÄvÄjumi ietver priekÅ”skatÄ«jumus divÄm ļoti pieprasÄ«tÄm un atŔķirÄ«gÄm funkcijÄm ā animÄcijas rakstzÄ«mju atpazÄ«Å”anai un daudzvalodu runas transkripcijai, kÄ arÄ« vairÄkus papildinÄjumus esoÅ”ajiem modeļiem, kas Å”odien ir pieejami programmÄ Video Indexer.
AnimÄcijas varoÅu atpazÄ«Å”ana
AnimÄts saturs ir viens no populÄrÄkajiem satura veidiem, taÄu standarta datora redzes modeļi, kas paredzÄti cilvÄku seju atpazÄ«Å”anai, ar to nedarbojas labi, it Ä«paÅ”i, ja saturÄ ir rakstzÄ«mes bez cilvÄka sejas vaibstiem. JaunajÄ priekÅ”skatÄ«juma versijÄ ir apvienots Video Indexer ar Microsoft Azure Custom Vision pakalpojumu, nodroÅ”inot jaunu modeļu kopu, kas automÄtiski nosaka un grupÄ animÄcijas rakstzÄ«mes un atvieglo to marÄ·ÄÅ”anu un atpazÄ«Å”anu, izmantojot integrÄtus pielÄgotus redzes modeļus.
Modeļi ir integrÄti vienÄ konveijerÄ, ļaujot ikvienam izmantot pakalpojumu bez maŔīnmÄcÄ«Å”anÄs zinÄÅ”anÄm. RezultÄti ir pieejami bezkoda video indeksÄtÄja portÄlÄ vai REST API, lai Ätri integrÄtu to savÄs lietojumprogrammÄs.
MÄs izveidojÄm Å”os modeļus, lai strÄdÄtu ar animÄtiem varoÅiem, kÄ arÄ« daži patÄrÄtÄji, kuri nodroÅ”inÄja reÄlu animÄtu saturu apmÄcÄ«bai un testÄÅ”anai. JaunÄs funkcionalitÄtes vÄrtÄ«bu labi apkopoja Endijs Guteridžs, Viacom International Media Networks vecÄkais studijas tehnoloÄ£iju un pÄcapstrÄdes direktors, kurÅ” bija viens no datu sniedzÄjiem: āIzturÄ«ga, ar AI darbinÄma animÄta satura atklÄÅ”anas pievienoÅ”ana ļaus MÄs varam Ätri un efektÄ«vi atrast un kataloÄ£izÄt rakstzÄ«mju metadatus no mÅ«su bibliotÄkas satura.
VissvarÄ«gÄkais ir tas, ka tas sniegs mÅ«su radoÅ”ajÄm komandÄm iespÄju uzreiz atrast vajadzÄ«go saturu, samazinot multivides pÄrvaldÄ«bai pavadÄ«to laiku un ļaujot tÄm koncentrÄties uz radoÅ”umu.
JÅ«s varat sÄkt iepazÄ«ties ar animÄcijas varoÅu atpazÄ«Å”anu ar
Satura identificÄÅ”ana un transkripcija vairÄkÄs valodÄs
Daži plaÅ”saziÅas lÄ«dzekļu resursi, piemÄram, ziÅas, hronikas un intervijas, satur ierakstus ar cilvÄkiem, kas runÄ dažÄdÄs valodÄs. LielÄkajai daļai esoÅ”o runas pÄrvÄrÅ”anas tekstÄ iespÄju ir nepiecieÅ”ams iepriekÅ” norÄdÄ«t audio atpazÄ«Å”anas valodu, tÄdÄjÄdi apgrÅ«tinot daudzvalodu videoklipu transkribÄÅ”anu.
MÅ«su jaunÄ automÄtiskÄs runÄtÄs valodas identifikÄcijas funkcija dažÄda veida saturam izmanto maŔīnmÄcÄ«Å”anÄs tehnoloÄ£iju, lai identificÄtu valodas, kas atrodamas multivides aktÄ«vos. PÄc noteikÅ”anas katrs valodas segments automÄtiski veic transkripcijas procesu attiecÄ«gajÄ valodÄ, un pÄc tam visi segmenti tiek apvienoti vienÄ vairÄku valodu transkripcijas failÄ.
IegÅ«tais atÅ”ifrÄjums ir pieejams kÄ daļa no video indeksÄtÄja JSON izvades un kÄ subtitru faili. Izvades atÅ”ifrÄjums ir integrÄts arÄ« ar Azure Search, ļaujot jums nekavÄjoties meklÄt dažÄdus valodu segmentus savos videoklipos. TurklÄt, strÄdÄjot ar portÄlu Video Indexer, ir pieejama daudzvalodu transkripcija, lai jÅ«s varÄtu skatÄ«t atÅ”ifrÄjumu un identificÄto valodu laika gaitÄ vai pÄriet uz konkrÄtÄm vietÄm videoklipÄ katrai valodai un skatÄ«t vairÄku valodu transkripciju kÄ parakstus, kamÄr videoklips tiek atskaÅots. Varat arÄ« tulkot saÅemto tekstu jebkurÄ no 54 pieejamajÄm valodÄm, izmantojot portÄlu un API.
Uzziniet vairÄk par jauno daudzvalodu satura atpazÄ«Å”anas funkciju un to, kÄ tÄ tiek izmantota video rÄdÄ«tÄjÄ
Papildu atjauninÄti un uzlaboti modeļi
MÄs arÄ« pievienojam jaunus modeļus Video Indexer un uzlabojam esoÅ”os, tostarp tÄlÄk aprakstÄ«tos.
Ar cilvÄkiem un vietÄm saistÄ«to entÄ«tiju izvilkÅ”ana
MÄs esam paplaÅ”inÄjuÅ”i savas esoÅ”Äs zÄ«mola atklÄÅ”anas iespÄjas, iekļaujot labi zinÄmus nosaukumus un vietas, piemÄram, Eifeļa torni ParÄ«zÄ un Bigbenu LondonÄ. Kad tie parÄdÄs Ä£enerÄtajÄ transkriptÄ vai ekrÄnÄ, izmantojot optisko rakstzÄ«mju atpazÄ«Å”anu (OCR), tiek pievienota attiecÄ«gÄ informÄcija. Izmantojot Å”o jauno funkciju, varat meklÄt visus videoklipÄ redzamos cilvÄkus, vietas un zÄ«molus un skatÄ«t detalizÄtu informÄciju par tiem, tostarp laika niÅ”as, aprakstus un saites uz Bing meklÄtÄjprogrammu, lai iegÅ«tu plaÅ”Äku informÄciju.
RÄmja noteikÅ”anas modelis redaktoram
Å Ä« jaunÄ funkcija pievieno "tagu" kopu metadatiem, kas pievienoti atseviŔķiem kadriem JSON detaļÄs, lai attÄlotu to redakcionÄlo veidu (piemÄram, plats kadrs, vidÄjs kadrs, tuvplÄns, ekstrÄmais tuvplÄns, divi kadri, vairÄki cilvÄki , ÄrÄ, iekÅ”telpÄs utt.). Å ie kadra veida raksturlielumi ir noderÄ«gi, rediÄ£Äjot videoklipus un reklÄmkadrus vai meklÄjot konkrÄtu kadru stilu mÄkslinieciskiem nolÅ«kiem.
Uzlabota IPTC kartÄÅ”anas precizitÄte
MÅ«su tÄmu noteikÅ”anas modelis nosaka videoklipa tÄmu, pamatojoties uz transkripciju, optisko rakstzÄ«mju atpazÄ«Å”anu (OCR) un atklÄtajÄm slavenÄ«bÄm, pat ja tÄma nav skaidri norÄdÄ«ta. MÄs kartÄjam Ŕīs atklÄtÄs tÄmas ÄetrÄs klasifikÄcijas jomÄs: Wikipedia, Bing, IPTC un IAB. Å is uzlabojums ļauj mums iekļaut otrÄ lÄ«meÅa IPTC klasifikÄciju.
Å o uzlabojumu izmantoÅ”ana ir tikpat vienkÄrÅ”a kÄ paÅ”reizÄjÄs video indeksÄtÄja bibliotÄkas atkÄrtota indeksÄÅ”ana.
Jauna tieÅ”raides straumÄÅ”anas funkcionalitÄte
Azure Media Services priekÅ”skatÄ«jumÄ mÄs piedÄvÄjam arÄ« divas jaunas funkcijas tieÅ”raides straumÄÅ”anai.
Ar AI darbinÄmÄ reÄllaika transkripcija paceļ tieÅ”raides straumÄÅ”anu uz nÄkamo lÄ«meni
Izmantojot Azure Media Services tieÅ”raides straumÄÅ”anai, tagad varat saÅemt izvades straumi, kas papildus audio un video saturam ietver arÄ« automÄtiski Ä£enerÄtu teksta celiÅu. Teksts ir izveidots, izmantojot reÄllaika audio transkripciju, kuras pamatÄ ir mÄkslÄ«gais intelekts. PielÄgotas metodes tiek izmantotas pirms un pÄc runas pÄrveidoÅ”anas tekstÄ, lai uzlabotu rezultÄtus. Teksta celiÅÅ” ir iesaiÅots IMSC1, TTML vai WebVTT formÄtÄ atkarÄ«bÄ no tÄ, vai tas tiek piegÄdÄts DASH, HLS CMAF vai HLS TS formÄtÄ.
ReÄllaika lÄ«nijas kodÄjums 24/7 OTT kanÄliem
Izmantojot mÅ«su v3 API, varat izveidot, pÄrvaldÄ«t un pÄrraidÄ«t OTT (over-the-top) kanÄlus, kÄ arÄ« izmantot visas pÄrÄjÄs Azure Media Services funkcijas, piemÄram, tieÅ”raides video pÄc pieprasÄ«juma (VOD, video pÄc pieprasÄ«juma), iepakojumu un digitÄlo tiesÄ«bu pÄrvaldÄ«bu ( DRM, digitÄlo tiesÄ«bu pÄrvaldÄ«ba).
Lai skatÄ«tu Å”o lÄ«dzekļu priekÅ”skatÄ«juma versijas, apmeklÄjiet vietni
Jaunas pakotÅu Ä£enerÄÅ”anas iespÄjas
Atbalsts audio apraksta celiÅiem
Apraides kanÄlos pÄrraidÄ«tajam saturam bieži vien papildus parastajam audio signÄlam ir arÄ« audio celiÅÅ” ar mutiskiem paskaidrojumiem par to, kas notiek ekrÄnÄ. TÄdÄjÄdi programmas ir vieglÄk pieejamas skatÄ«tÄjiem ar redzes traucÄjumiem, Ä«paÅ”i, ja saturs galvenokÄrt ir vizuÄls. Jauns
Notiek ID3 metadatu ievietoŔana
Lai klienta atskaÅotÄjam signalizÄtu par reklÄmu vai pielÄgotu metadatu notikumu ievietoÅ”anu, raidorganizÄcijas bieži izmanto videoklipÄ iegultus metadatus ar laikiestatÄ«jumu. Papildus SCTE-35 signalizÄcijas režīmiem mÄs tagad arÄ« atbalstÄm
Microsoft Azure partneri demonstrÄ visaptveroÅ”us risinÄjumus
starptautiska kompÄnija
Avots: www.habr.com