Google te entwodwi yon nouvo kodèk odyo, Lyra, optimize pou reyalize maksimòm kalite vwa menm lè w ap itilize chanèl kominikasyon trè dousman. Kòd aplikasyon Lyra ekri nan C++ epi li louvri anba lisans Apache 2.0, men nan mitan depandans ki nesesè pou operasyon gen yon bibliyotèk propriétaire libsparse_inference.so ak yon aplikasyon nwayo pou kalkil matematik. Li te note ke bibliyotèk la propriétaires se tanporè - nan tan kap vini an Google pwomèt yo devlope yon ranplasman louvri epi bay sipò pou plizyè tribin.
An tèm de bon jan kalite a nan done vwa transmèt nan vitès ki ba, Lyra se siyifikativman siperyè kodèk tradisyonèl ki itilize metòd pwosesis siyal dijital. Pou reyalize bon jan kalite transmisyon vwa nan kondisyon yon kantite limite enfòmasyon transmèt, anplis metòd konvansyonèl konpresyon odyo ak konvèsyon siyal, Lyra sèvi ak yon modèl lapawòl ki baze sou yon sistèm aprantisaj machin, ki pèmèt ou rkree enfòmasyon ki manke yo ki baze sou karakteristik lapawòl tipik. Modèl yo te itilize pou jenere son an te fòme lè l sèvi avèk plizyè mil èdtan nan anrejistreman vwa nan plis pase 70 lang.
Codec a gen ladann yon ankode ak yon dekodeur. Algorithm ankode a se pou ekstrè done paramèt vwa chak 40 milisgond, konprese yo, epi transmèt yo bay moun k ap resevwa yo sou rezo a. Yon kanal kominikasyon ak yon vitès 3 kilobit pou chak segonn se ase pou transmisyon done. Paramèt odyo ekstrè yo enkli espektrogram logaritmik mel ki pran an kont karakteristik enèji lapawòl nan diferan ranje frekans epi yo prepare pran an kont modèl pèsepsyon oditif imen an.
Dekodè a sèvi ak yon modèl jeneratif ki, ki baze sou paramèt odyo transmèt yo, rkree siyal lapawòl. Pou diminye konpleksite nan kalkil yo, yo te itilize yon modèl ki lejè ki baze sou yon rezo neral frekan, ki se yon varyant nan modèl sentèz lapawòl WaveRNN, ki itilize yon frekans echantiyon pi ba, men jenere plizyè siyal nan paralèl nan diferan chenn frekans. Lè sa a, siyal ki kapab lakòz yo sipèpoze yo pwodwi yon siyal pwodiksyon sèl ki koresponn ak to echantiyon an espesifye.
Enstriksyon processeur espesyalize ki disponib nan processeurs ARM 64-bit yo itilize tou pou akselerasyon. Kòm yon rezilta, malgre itilize nan aprantisaj machin, kodek Lyra a ka itilize pou kodaj ak dekodaj lapawòl an tan reyèl sou smartphones mitan-ranje, demontre latansi transmisyon siyal nan 90 milisgond.
Sous: opennet.ru