Microsoft misija ir dot iespÄju ikvienam planÄtas cilvÄkam un organizÄcijai sasniegt vairÄk. Mediju nozare ir lielisks piemÄrs, kÄ padarÄ«t Å”o misiju par realitÄti. MÄs dzÄ«vojam laikmetÄ, kad tiek radÄ«ts un patÄrÄts vairÄk satura, vairÄkos veidos un vairÄkÄs ierÄ«cÄs. IBC 2019 mÄs dalÄ«jÄmies ar jaunÄkajiem jauninÄjumiem, pie kuriem strÄdÄjam, un to, kÄ tie var palÄ«dzÄt pÄrveidot jÅ«su mediju pieredzi.
SÄ«kÄka informÄcija zem griezuma!
Å Ä« lapa ir ieslÄgta
Video indeksÄtÄjs tagad atbalsta animÄciju un daudzvalodu saturu
PagÄjuÅ”ajÄ gadÄ IBC mÄs ieguvÄm savu balvu , un Å”ogad tas kļuva vÄl labÄks. Video indeksÄtÄjs automÄtiski izvelk informÄciju un metadatus no multivides failiem, piemÄram, izrunÄtus vÄrdus, sejas, emocijas, tÄmas un zÄ«molus, un, lai to izmantotu, jums nav jÄbÅ«t maŔīnmÄcÄ«Å”anÄs ekspertam.
MÅ«su jaunÄkie piedÄvÄjumi ietver priekÅ”skatÄ«jumus divÄm ļoti pieprasÄ«tÄm un atŔķirÄ«gÄm funkcijÄm ā animÄcijas rakstzÄ«mju atpazÄ«Å”anai un daudzvalodu runas transkripcijai, kÄ arÄ« vairÄkus papildinÄjumus esoÅ”ajiem modeļiem, kas Å”odien ir pieejami programmÄ Video Indexer.
AnimÄcijas varoÅu atpazÄ«Å”ana
AnimÄts saturs ir viens no populÄrÄkajiem satura veidiem, taÄu standarta datora redzes modeļi, kas paredzÄti cilvÄku seju atpazÄ«Å”anai, ar to nedarbojas labi, it Ä«paÅ”i, ja saturÄ ir rakstzÄ«mes bez cilvÄka sejas vaibstiem. JaunajÄ priekÅ”skatÄ«juma versijÄ ir apvienots Video Indexer ar Microsoft Azure Custom Vision pakalpojumu, nodroÅ”inot jaunu modeļu kopu, kas automÄtiski nosaka un grupÄ animÄcijas rakstzÄ«mes un atvieglo to marÄ·ÄÅ”anu un atpazÄ«Å”anu, izmantojot integrÄtus pielÄgotus redzes modeļus.
Modeļi ir integrÄti vienÄ konveijerÄ, ļaujot ikvienam izmantot pakalpojumu bez maŔīnmÄcÄ«Å”anÄs zinÄÅ”anÄm. RezultÄti ir pieejami bezkoda video indeksÄtÄja portÄlÄ vai REST API, lai Ätri integrÄtu to savÄs lietojumprogrammÄs.
MÄs izveidojÄm Å”os modeļus, lai strÄdÄtu ar animÄtiem varoÅiem, kÄ arÄ« daži patÄrÄtÄji, kuri nodroÅ”inÄja reÄlu animÄtu saturu apmÄcÄ«bai un testÄÅ”anai. JaunÄs funkcionalitÄtes vÄrtÄ«bu labi apkopoja Endijs Guteridžs, Viacom International Media Networks vecÄkais studijas tehnoloÄ£iju un pÄcapstrÄdes direktors, kurÅ” bija viens no datu sniedzÄjiem: āIzturÄ«ga, ar AI darbinÄma animÄta satura atklÄÅ”anas pievienoÅ”ana ļaus MÄs varam Ätri un efektÄ«vi atrast un kataloÄ£izÄt rakstzÄ«mju metadatus no mÅ«su bibliotÄkas satura.
VissvarÄ«gÄkais ir tas, ka tas sniegs mÅ«su radoÅ”ajÄm komandÄm iespÄju uzreiz atrast vajadzÄ«go saturu, samazinot multivides pÄrvaldÄ«bai pavadÄ«to laiku un ļaujot tÄm koncentrÄties uz radoÅ”umu.
JÅ«s varat sÄkt iepazÄ«ties ar animÄcijas varoÅu atpazÄ«Å”anu ar .
Satura identificÄÅ”ana un transkripcija vairÄkÄs valodÄs
Daži plaÅ”saziÅas lÄ«dzekļu resursi, piemÄram, ziÅas, hronikas un intervijas, satur ierakstus ar cilvÄkiem, kas runÄ dažÄdÄs valodÄs. LielÄkajai daļai esoÅ”o runas pÄrvÄrÅ”anas tekstÄ iespÄju ir nepiecieÅ”ams iepriekÅ” norÄdÄ«t audio atpazÄ«Å”anas valodu, tÄdÄjÄdi apgrÅ«tinot daudzvalodu videoklipu transkribÄÅ”anu.
MÅ«su jaunÄ automÄtiskÄs runÄtÄs valodas identifikÄcijas funkcija dažÄda veida saturam izmanto maŔīnmÄcÄ«Å”anÄs tehnoloÄ£iju, lai identificÄtu valodas, kas atrodamas multivides aktÄ«vos. PÄc noteikÅ”anas katrs valodas segments automÄtiski veic transkripcijas procesu attiecÄ«gajÄ valodÄ, un pÄc tam visi segmenti tiek apvienoti vienÄ vairÄku valodu transkripcijas failÄ.
IegÅ«tais atÅ”ifrÄjums ir pieejams kÄ daļa no video indeksÄtÄja JSON izvades un kÄ subtitru faili. Izvades atÅ”ifrÄjums ir integrÄts arÄ« ar Azure Search, ļaujot jums nekavÄjoties meklÄt dažÄdus valodu segmentus savos videoklipos. TurklÄt, strÄdÄjot ar portÄlu Video Indexer, ir pieejama daudzvalodu transkripcija, lai jÅ«s varÄtu skatÄ«t atÅ”ifrÄjumu un identificÄto valodu laika gaitÄ vai pÄriet uz konkrÄtÄm vietÄm videoklipÄ katrai valodai un skatÄ«t vairÄku valodu transkripciju kÄ parakstus, kamÄr videoklips tiek atskaÅots. Varat arÄ« tulkot saÅemto tekstu jebkurÄ no 54 pieejamajÄm valodÄm, izmantojot portÄlu un API.
Uzziniet vairÄk par jauno daudzvalodu satura atpazÄ«Å”anas funkciju un to, kÄ tÄ tiek izmantota video rÄdÄ«tÄjÄ .
Papildu atjauninÄti un uzlaboti modeļi
MÄs arÄ« pievienojam jaunus modeļus Video Indexer un uzlabojam esoÅ”os, tostarp tÄlÄk aprakstÄ«tos.
Ar cilvÄkiem un vietÄm saistÄ«to entÄ«tiju izvilkÅ”ana
MÄs esam paplaÅ”inÄjuÅ”i savas esoÅ”Äs zÄ«mola atklÄÅ”anas iespÄjas, iekļaujot labi zinÄmus nosaukumus un vietas, piemÄram, Eifeļa torni ParÄ«zÄ un Bigbenu LondonÄ. Kad tie parÄdÄs Ä£enerÄtajÄ transkriptÄ vai ekrÄnÄ, izmantojot optisko rakstzÄ«mju atpazÄ«Å”anu (OCR), tiek pievienota attiecÄ«gÄ informÄcija. Izmantojot Å”o jauno funkciju, varat meklÄt visus videoklipÄ redzamos cilvÄkus, vietas un zÄ«molus un skatÄ«t detalizÄtu informÄciju par tiem, tostarp laika niÅ”as, aprakstus un saites uz Bing meklÄtÄjprogrammu, lai iegÅ«tu plaÅ”Äku informÄciju.
RÄmja noteikÅ”anas modelis redaktoram
Å Ä« jaunÄ funkcija pievieno "tagu" kopu metadatiem, kas pievienoti atseviŔķiem kadriem JSON detaļÄs, lai attÄlotu to redakcionÄlo veidu (piemÄram, plats kadrs, vidÄjs kadrs, tuvplÄns, ekstrÄmais tuvplÄns, divi kadri, vairÄki cilvÄki , ÄrÄ, iekÅ”telpÄs utt.). Å ie kadra veida raksturlielumi ir noderÄ«gi, rediÄ£Äjot videoklipus un reklÄmkadrus vai meklÄjot konkrÄtu kadru stilu mÄkslinieciskiem nolÅ«kiem.
Kadru veida noteikÅ”ana video rÄdÄ«tÄjÄ.
Uzlabota IPTC kartÄÅ”anas precizitÄte
MÅ«su tÄmu noteikÅ”anas modelis nosaka videoklipa tÄmu, pamatojoties uz transkripciju, optisko rakstzÄ«mju atpazÄ«Å”anu (OCR) un atklÄtajÄm slavenÄ«bÄm, pat ja tÄma nav skaidri norÄdÄ«ta. MÄs kartÄjam Ŕīs atklÄtÄs tÄmas ÄetrÄs klasifikÄcijas jomÄs: Wikipedia, Bing, IPTC un IAB. Å is uzlabojums ļauj mums iekļaut otrÄ lÄ«meÅa IPTC klasifikÄciju.
Å o uzlabojumu izmantoÅ”ana ir tikpat vienkÄrÅ”a kÄ paÅ”reizÄjÄs video indeksÄtÄja bibliotÄkas atkÄrtota indeksÄÅ”ana.
Jauna tieÅ”raides straumÄÅ”anas funkcionalitÄte
Azure Media Services priekÅ”skatÄ«jumÄ mÄs piedÄvÄjam arÄ« divas jaunas funkcijas tieÅ”raides straumÄÅ”anai.
Ar AI darbinÄmÄ reÄllaika transkripcija paceļ tieÅ”raides straumÄÅ”anu uz nÄkamo lÄ«meni
Izmantojot Azure Media Services tieÅ”raides straumÄÅ”anai, tagad varat saÅemt izvades straumi, kas papildus audio un video saturam ietver arÄ« automÄtiski Ä£enerÄtu teksta celiÅu. Teksts ir izveidots, izmantojot reÄllaika audio transkripciju, kuras pamatÄ ir mÄkslÄ«gais intelekts. PielÄgotas metodes tiek izmantotas pirms un pÄc runas pÄrveidoÅ”anas tekstÄ, lai uzlabotu rezultÄtus. Teksta celiÅÅ” ir iesaiÅots IMSC1, TTML vai WebVTT formÄtÄ atkarÄ«bÄ no tÄ, vai tas tiek piegÄdÄts DASH, HLS CMAF vai HLS TS formÄtÄ.
ReÄllaika lÄ«nijas kodÄjums 24/7 OTT kanÄliem
Izmantojot mÅ«su v3 API, varat izveidot, pÄrvaldÄ«t un pÄrraidÄ«t OTT (over-the-top) kanÄlus, kÄ arÄ« izmantot visas pÄrÄjÄs Azure Media Services funkcijas, piemÄram, tieÅ”raides video pÄc pieprasÄ«juma (VOD, video pÄc pieprasÄ«juma), iepakojumu un digitÄlo tiesÄ«bu pÄrvaldÄ«bu ( DRM, digitÄlo tiesÄ«bu pÄrvaldÄ«ba).
Lai skatÄ«tu Å”o lÄ«dzekļu priekÅ”skatÄ«juma versijas, apmeklÄjiet vietni .
Jaunas pakotÅu Ä£enerÄÅ”anas iespÄjas
Atbalsts audio apraksta celiÅiem
Apraides kanÄlos pÄrraidÄ«tajam saturam bieži vien papildus parastajam audio signÄlam ir arÄ« audio celiÅÅ” ar mutiskiem paskaidrojumiem par to, kas notiek ekrÄnÄ. TÄdÄjÄdi programmas ir vieglÄk pieejamas skatÄ«tÄjiem ar redzes traucÄjumiem, Ä«paÅ”i, ja saturs galvenokÄrt ir vizuÄls. Jauns ļauj anotÄt vienu no audio celiÅiem kÄ audio apraksta celiÅu (AD, audio apraksts), ļaujot spÄlÄtÄjiem padarÄ«t AD celiÅu pieejamu skatÄ«tÄjiem.
Notiek ID3 metadatu ievietoŔana
Lai klienta atskaÅotÄjam signalizÄtu par reklÄmu vai pielÄgotu metadatu notikumu ievietoÅ”anu, raidorganizÄcijas bieži izmanto videoklipÄ iegultus metadatus ar laikiestatÄ«jumu. Papildus SCTE-35 signalizÄcijas režīmiem mÄs tagad arÄ« atbalstÄm , ko definÄjis lietojumprogrammas izstrÄdÄtÄjs lietoÅ”anai klienta lietojumprogrammÄ.
Microsoft Azure partneri demonstrÄ visaptveroÅ”us risinÄjumus
iepazÄ«stina ar Bitmovin Video Encoding un Bitmovin Video Player Microsoft Azure. Klienti tagad var izmantot Å”os kodÄÅ”anas un atskaÅoÅ”anas risinÄjumus pakalpojumÄ Azure un gÅ«t labumu no uzlabotÄm funkcijÄm, piemÄram, trÄ«spakÄpju kodÄÅ”anas, AV1/VC kodeku atbalsta, daudzvalodu subtitriem un iepriekÅ” integrÄtas video analÄ«zes QoS, reklÄmÄm un video izsekoÅ”anas.
demonstrÄ savu lietotÄja dzÄ«ves cikla pÄrvaldÄ«bas platformu vietnÄ Azure. KÄ vadoÅ”ais ieÅÄmumu un klientu dzÄ«ves cikla pÄrvaldÄ«bas risinÄjumu nodroÅ”inÄtÄjs Evergent izmanto Azure AI, lai palÄ«dzÄtu augstÄkÄs klases izklaides pakalpojumu sniedzÄjiem uzlabot klientu piesaisti un noturÄÅ”anu, radot mÄrÄ·tiecÄ«gas pakalpojumu paketes un piedÄvÄjumus klientu dzÄ«ves cikla kritiskajos punktos.
demonstrÄs savu inteliÄ£ento uz mÄkoÅa bÄzes multivides marÅ”rutÄÅ”anas pakalpojumu SRT Hub, kas palÄ«dz klientiem pÄrveidot darbplÅ«smas no gala lÄ«dz galam, izmantojot un pÄrveidojot darbplÅ«smas ar Hublets no Avid, Telestream, Wowza, Cinegy un Make.tv.
ir izstrÄdÄjis apraides lÄ«meÅa multivides pakalpojumu komplektu Azure platformÄ saviem satelÄ«ta un pÄrvaldÄ«tajiem multivides pakalpojumu klientiem. SES demonstrÄs risinÄjumus pilnÄ«bÄ pÄrvaldÄ«tiem atskaÅoÅ”anas pakalpojumiem, tostarp galveno atskaÅoÅ”anu, lokalizÄtu atskaÅoÅ”anu, reklÄmu atklÄÅ”anu un aizstÄÅ”anu, kÄ arÄ« augstas kvalitÄtes reÄllaika 24x7 daudzkanÄlu kodÄjumu pakalpojumÄ Azure.
padara Azure pieejamus Ärtus mÄkoÅa rÄ«kus un parakstu automatizÄcijas tehnoloÄ£iju. Å ie piedÄvÄjumi atvieglos mediju organizÄcijÄm iespÄju automÄtiski pievienot subtitrus, tostarp subtitrus sveÅ”valodÄs, savÄm tieÅ”saistes un bezsaistes video darbplÅ«smÄm pakalpojumÄ Azure.
starptautiska kompÄnija , tehnoloÄ£iju pakalpojumu uzÅÄmums, ir integrÄjis savu OTT SaaS platformu TEPlay pakalpojumÄ Azure Media Services, lai nodroÅ”inÄtu OTT saturu no mÄkoÅa. Tata Elxsi ir arÄ« piedÄvÄjis savu Falcon Eye pieredzes kvalitÄtes (QoE) uzraudzÄ«bas risinÄjumu Microsoft Azure, nodroÅ”inot analÄ«zi un metriku lÄmumu pieÅemÅ”anai.
dara savu straumÄÅ”anas platformu pieejamu Azure kÄ beta versiju. Verizon Media Platform ir uzÅÄmuma lÄ«meÅa pÄrvaldÄ«ts OTT risinÄjums, kas ietver DRM, reklÄmu ievietoÅ”anu, individuÄlas personalizÄtas sesijas, dinamisku satura nomaiÅu un video piegÄdi. IntegrÄcija vienkÄrÅ”o darbplÅ«smas, globÄlo atbalstu un mÄrogu, kÄ arÄ« atbloÄ·Ä dažas no unikÄlajÄm Azure iespÄjÄm.
Avots: www.habr.com