Deezer axını xidmətinin təminatçısı Spleeter eksperimental layihəsinin mənbə kodları, mürəkkəb səs kompozisiyalarından səs mənbələrini ayırmaq üçün maşın öyrənmə sistemini inkişaf etdirir. Proqram kompozisiyadan vokalı çıxarmağa və yalnız musiqi müşayiətini saxlamağa, ayrı-alay instrumentlərin səslərini manipulyasiyaya və ya musiqini çıxarmağa, səsi digər səs sətrinə, mikslərə, karaoke'ya və ya transkripsiyaya tətbiq etməyə imkan verir. Layihənin kodu Python dilində Tensorflow mühərrikindən istifadə etməklə yazılıb. MIT lisenziyası altında.
Yükləmək üçün artıq vokal (bir səs) müşayiətdən ayırmağı, həmçinin 4 və 5 axına bölməyi mümkün edən, vokalı, zərb alətləri, bas, piano və qalan səsi əhatə edən təlim edilmiş modelləri. Spleeter, həm Python kitabxanası kimi, həm də müstəqil komanda xətti vasitəsi olaraq tətbiq oluna bilər. Ən sadə halda, ilkin fayl əsasında iki, dörd və ya beş səs faylı (vocals.wav, drums.wav, bass.wav, piano.wav, other.wav) müşayiət komponentləri ilə birlikdə.
2 və 4 axına bölmə zamanı Spleeter çox yüksək performans təmin edir, məsələn, GPU istifadə olunduqda, səs faylını 4 axına ayırma prosesi orijinal kompozisiyanın uzunluğundan 100 dəfə daha az vaxt alır. NVIDIA GeForce GTX 1080 GPU və 32 nüvəli Intel Xeon Gold 6134 CPU olan sistemdə musDB-nin üç saat 27 dəqiqəlik test kolleksiyasının emalı 90 saniyə ərzində tamamlanıb.
Spleeter-in səs ayırma sahəsindəki digər inkişaflarla, məsələn, açıq layihə , müqayisədə daha yüksək keyfiyyətli modellərin daha geniş səs faylları kolleksiyasından yaradılması ilə qeyd olunur. Müəllif hüquqları məhdudiyyətləri səbəbindən maşın öyrənməsi mütəxəssisləri kifayət qədər az sayda ictimai duhuyar musiqi fayllarına giriş imkanları ilə məhdudlaşır, bu zaman Spleeter-in modelləri geniş musiqi kataloqundan əldə edilən məlumatlarla yaradılıb.
İl Open-Unmix ilə Spleeter-in alətləri test zamanı CPU-da təxminən 35% daha sürətlə ayrılır, MP3 fayllarını dəstəkləyir və keyfiyyətli nəticə yaradır (Open-Unmix-də vokal ayırarkən bəzi alətlərin izləri qalır, bu, ehtimal ki, Open-Unmix modellerinin yalnız 150 kompozisiyadan ibarət kolleksiya əsasında təlim olunmasından irəl gəlir).
Mənbə: opennet.ru
