Açık-Unmix Müzik Ayrımı
Open-Unmix (UMX), bir şarkıyı parçalarına ayıran açık kaynaklı bir derin öğrenme sistemidir: vokaller, davullar, baslar ve diğer enstrümanlar.
Genel Bakış
It matters as a reproducible, reference-quality baseline that made music source separation accessible to researchers, musicians, and hobbyists.
Derin Dalış
Stoter, Uhlich, Liutkus ve Mitsufuji tarafından 2019'da piyasaya sürülen Open-Unmix, PyTorch'ta (TensorFlow ve NNabla bağlantı noktalarıyla) şeffaf, iyi belgelenmiş bir temel olarak bilinçli olarak oluşturuldu. Karışımın büyüklük spektrogramına göre hedef gövde başına bir model eğitir. Çekirdek, hedef kaynak için bir spektral maske öngören, tamamen bağlı katmanlarla sarılmış üç katmanlı, çift yönlü bir LSTM'dir. Büyüklükle çalıştığı için karışımın fazını yeniden kullanır ve isteğe bağlı olarak çok kanallı bir Wiener filtresiyle rafine edilen ters STFT yoluyla gövdeyi yeniden yapılandırır. Açık MUSDB18 veri seti üzerinde eğitilmiştir ve en yüksek puanları takip etmez; Amacı netlik ve tekrarlanabilirlik olup topluluğa güvenilir bir karşılaştırma noktası ve üzerine inşa edilebilecek bir temel sağlamaktır.
Teknik Bilgi
Her gövdenin giriş büyüklüğü spektrogramı üzerinde çalışan kendi ağı vardır. Frekans bölmeleri yoğun bir katmanla standartlaştırılır ve boyutsallığı azaltılır; çift yönlü bir LSTM, her iki yönde de zamansal bağlamı yakalar ve daha yoğun katmanlar, yumuşak bir maske oluşturmak için tam frekans çözünürlüğüne geri genişler. Maskenin karışım büyüklüğüyle çarpılması tahmini kaynağı verir; orijinal faz yeniden kullanılır ve bir Wiener filtresi, daha temiz sonuçlar için tüm gövdeleri ortaklaşa hassaslaştırabilir.
Stratejik Etki
Access and reach
Transkripsiyon, anlatım ve ses arayüzleri aracılığıyla erişilebilirliği artırır.
Maliyet ve bütçe
Medya ekipleri daha küçük bütçelerle daha iyi ses kalitesi sunabilir.
Speed and scale
Müşteriyle yüz yüze olan sistemler, sözlü etkileşimleri daha büyük ölçekte işleyebilir.
Açık-Unmiks Müzik Ayrımının Geleceği
Open-Unmix, ham kalite açısından Demucs ve hibrit spektrogram-dalga biçimi sistemleri gibi dalga biçimi modelleri tarafından geride bırakıldı, ancak açık ve hacklenebilir bir referans olma rolü, onu öğretim ve hızlı prototip oluşturma açısından uygun kılıyor. Daha geniş alan, daha yüksek doğruluklu hibrit ve transformatör tabanlı ayırıcılara ve daha fazla, daha ince taneli cihaz kategorilerinin ayrılmasına doğru ilerlerken, eğitimde ve bir sağlık kontrolü temeli olarak kullanılmaya devam edilmesini bekliyoruz.
Gerçek Dünya Uygulaması
Bir şarkının karaoke veya enstrümantal versiyonunu oluşturmak için izole edilmiş bir vokal parçasının çıkarılması.
Üreticiler tarafından yeniden miksaj ve örnekleme için davul veya bas gövdelerinin çıkarılması.
MUSDB18'deki yeni ayırma modellerini değerlendirmek için tekrarlanabilir bir araştırma temeli olarak hizmet etmek.
Müzik öğrencilerinin bir enstrümanı izole ederek miksteki bölümünü incelemesine izin vermek.
Riskler ve Korkuluklar
Onay eksik olduğunda sesin kötüye kullanılması ve kimliğe bürünme riskleri artar.
Aksanlar, lehçeler veya gürültülü ortamlarda doğruluk düşebilir.
Sentetik ses, net bir etiketleme olmadan, orijinal konuşmayla karıştırılabilir.
Uygulama Yol Haritası
Sesin yakalanması, klonlanması ve yeniden kullanılması için açık izin alın.
Kaliteyi farklı hoparlörler ve arka plan koşullarında test edin.
Bir insanın çıktıları ne zaman incelemesi veya onaylaması gerektiğini tanımlayın.
Sentetik sesi etiketleyin ve sorumluluk için kaynak kayıtlarını saklayın.
Keşfetmeye Devam Edin
Free newsletter
Get the daily AI briefing
Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.
One email each weekday. Unsubscribe in one click. We never sell or share your address.
Test yourself
Take the Open-Unmix Music Separation quiz
Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.
Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation
Next guide
Müzik Ayrımı
Sık sorulan sorular
What is Open-Unmix Music Separation?
Open-Unmix (UMX), bir şarkıyı parçalarına ayıran açık kaynaklı bir derin öğrenme sistemidir: vokaller, davullar, baslar ve diğer enstrümanlar. Müzik kaynağı ayrımını araştırmacılar, müzisyenler ve hobiciler için erişilebilir kılan tekrarlanabilir, referans kalitesinde bir temel olarak önemlidir.
Open-Unmix ne işe yarar?
Open-Unmix, bir karışımı ayrı enstrüman ve vokal gövdelerine bölen bir müzik kaynağı ayırma sistemidir.
Open-Unmix'in merkezinde hangi sinir ağı var?
Open-Unmix, tamamen bağlı katmanlarla sarılmış çift yönlü bir LSTM kullanarak spektral bir maskeyi tahmin eder.
Open-Unmix hangi temsile göre çalışır?
Büyüklük spektrogramları üzerinde çalışıyor, bir maskeyi tahmin ediyor ve karışımın fazını yeniden yapılandırma için yeniden kullanıyor.
Open-Unmix hangi veri kümesi üzerinde eğitiliyor?
Open-Unmix, eğitim ve değerlendirme için açık MUSDB18 müzik ayırma veri setini kullanır.
Open-Unmix'in ana tasarım hedefi neydi?
En yüksek puanı alan bir kara kutu yerine açık, iyi belgelenmiş, tekrarlanabilir bir temel olarak inşa edildi.