🥇 स्प्लीटरको कोड, संगीत र आवाज अलग गर्ने प्रणाली, खुला छ

स्ट्रिमिङ प्रदायक Deezer खोलियो प्रायोगिक परियोजना Spleeter को स्रोत पाठ, जसले जटिल अडियो रचनाहरूबाट ध्वनि स्रोतहरू अलग गर्न मेसिन लर्निङ प्रणाली विकास गर्छ। कार्यक्रमले तपाइँलाई रचनाबाट भोकलहरू हटाउन र केवल संगीत संगत छोड्न, व्यक्तिगत वाद्ययन्त्रहरूको आवाज हेरफेर गर्न, वा संगीत खारेज गर्न र मिक्सहरू, कराओके वा ट्रान्सक्रिप्सन सिर्जना गर्न, अर्को ध्वनि श्रृंखलासँग ओभरलेको लागि आवाज छोड्न अनुमति दिन्छ। प्रोजेक्ट कोड Tensorflow इन्जिन प्रयोग गरेर Python मा लेखिएको छ र द्वारा वितरित MIT लाइसेन्स अन्तर्गत।

लोड गर्न को लागी प्रस्ताव गरिन्छ पहिल्यै प्रशिक्षित मोडेलहरू संगतबाट भोकल (एउटा आवाज) अलग गर्नका लागि, साथै भोकल, ड्रम, बास, पियानो र बाँकी ध्वनि सहित 4 र 5 स्ट्रिमहरूमा विभाजन गर्न। Spleeter लाई पाइथन लाइब्रेरीको रूपमा र स्ट्यान्डअलोन कमाण्ड लाइन उपयोगिताको रूपमा प्रयोग गर्न सकिन्छ। सरल अवस्थामा, स्रोत फाइलमा आधारित सिर्जना गरियो आवाज र संगत कम्पोनेन्टहरू (vocals.wav, drums.wav, bass.wav, piano.wav, other.wav) संग दुई, चार वा पाँच फाइलहरू।

2 र 4 थ्रेडहरूमा विभाजन गर्दा, Spleeter ले धेरै उच्च प्रदर्शन प्रदान गर्दछ, उदाहरणका लागि, GPU प्रयोग गर्दा, 4 थ्रेडहरूमा अडियो फाइल विभाजन गर्दा मूल संरचनाको अवधि भन्दा 100 गुणा कम समय लाग्छ। NVIDIA GeForce GTX 1080 GPU र 32-core Intel Xeon Gold 6134 CPU भएको प्रणालीमा, musDB परीक्षण सङ्कलन, जुन तीन घण्टा २७ मिनेटसम्म चलेको थियो, ९० सेकेन्डमा प्रशोधन गरिएको थियो।

स्प्लीटरका फाइदाहरू मध्ये, अडियो विभाजनको क्षेत्रमा अन्य विकासहरूको तुलनामा, जस्तै खुला स्रोत परियोजना खोल्नुहोस्-अनमिक्स, ध्वनि फाइलहरूको एक विस्तृत संग्रहबाट निर्मित उच्च गुणस्तर मोडेलहरूको प्रयोग उल्लेख गर्दछ। प्रतिलिपि अधिकार प्रतिबन्धका कारण, मेसिन लर्निङ अनुसन्धानकर्ताहरू संगीत फाइलहरूको स्पष्ट रूपमा विरल सार्वजनिक संग्रहहरूमा पहुँच गर्न सीमित छन्, जबकि Spleeter को मोडेलहरू Deezer को विशाल संगीत सूचीबाट डेटा प्रयोग गरेर निर्माण गरिएको थियो।

द्वारा तुलना ओपन-अनमिक्सको साथ, CPU मा परीक्षण गर्दा स्प्लीटरको पृथकीकरण उपकरण लगभग 35% छिटो हुन्छ, MP3 फाइलहरूलाई समर्थन गर्दछ, र उल्लेखनीय रूपमा राम्रो परिणामहरू उत्पन्न गर्दछ (ओपन-अनमिक्समा एकल आवाजले केही उपकरणहरूको ट्रेस छोड्छ, जुन सम्भवतः यस तथ्यको कारणले गर्दा हुन्छ। मोडेलहरू ओपन-अनमिक्स मात्र 150 रचनाहरूको संग्रहमा प्रशिक्षित छन्)।

स्रोत: opennet.ru

Spleeter को लागि खुला स्रोत, संगीत र आवाज अलग गर्न को लागी एक प्रणाली

एक टिप्पणी थप्न Отменить ответ