Panyadia streaming Deezer kode sumber pikeun proyék ékspérimén Spleeter, nu ngamekarkeun sistem learning mesin pikeun misahkeun sumber sora tina komposisi sora kompléks. Program ieu ngamungkinkeun anjeun ngahapus vokal tina komposisi sareng ngan ukur ngantunkeun iringan musik, ngamanipulasi sora instrumen individu atanapi miceun musik sareng ngantepkeun sora pikeun overlay dina rentang sora anu sanés, nyiptakeun campuran, karaoke atanapi transkripsi. Kodeu proyék ditulis dina Python ngagunakeun mesin Tensorflow na handapeun lisénsi MIT.
Pikeun loading model geus dilatih pikeun misahkeun vokal (hiji sora) tina iringan, kitu ogé pikeun ngabagi kana 4 jeung 5 aliran, kaasup vokal, drum, bass, piano jeung sesa sora. Spleeter tiasa dianggo salaku perpustakaan Python sareng salaku utilitas garis paréntah mandiri. Dina kasus pangbasajanna, dumasar kana file sumber dua, opat atanapi lima file sareng komponén sora sareng iringan (vocals.wav, drums.wav, bass.wav, piano.wav, other.wav).
Nalika dibagi kana 2 sareng 4 aliran, Spleeter nyayogikeun kinerja anu luhur, contona, nalika nganggo GPU, ngabagi file audio kana 4 aliran butuh waktos 100 kali kirang ti durasi komposisi aslina. Dina sistem sareng NVIDIA GeForce GTX 1080 GPU sareng 32-inti Intel Xeon Gold 6134 CPU, kumpulan tés musDB diolah dina 27 detik, salami tilu jam sareng 90 menit.
Kaunggulan Spleeter tina pamekaran pamisah audio anu sanés sapertos proyék open source kabuka unmix, nyebutkeun pamakéan model kualitas luhur diwangun dina dasar hiji kumpulan éksténsif file sora. Alatan larangan hak cipta, panalungtik machine learning diwatesan ku aksés ka koleksi umum file musik anu cukup saeutik, sedengkeun pikeun Spleeter, model diwangun ngagunakeun data tina katalog musik éksténsif Deezer urang.
on Kalayan Open-Unmix, alat Spleeter ngabagi kira-kira 35% langkung gancang nalika diuji dina CPU, ngadukung file MP3, sareng ngahasilkeun hasil anu langkung saé (ekstraksi sora dina Open-Unmix ngantunkeun sababaraha alat, anu sigana kusabab kanyataan yén model Open-Unmix dilatih dina kumpulan ngan 150 lagu).
sumber: opennet.ru