دليل الصوت AI

فتح وفصل الموسيقى

Open-Unmix (UMX) هو نظام تعليمي عميق مفتوح المصدر يقسم الأغنية إلى أجزائها: غناء، وطبول، وباس، وأدوات أخرى.

قراءة لمدة دقيقتينآخر تحديث

نظرة عامة

It matters as a reproducible, reference-quality baseline that made music source separation accessible to researchers, musicians, and hobbyists.

الغوص العميق

تم إصدار Open-Unmix في عام 2019 بواسطة Stoter وUhlich وLiutkus وMitsufuji، وقد تم تصميمه عمدًا كخط أساس شفاف وموثق جيدًا في PyTorch (مع منافذ TensorFlow وNNabla). يقوم بتدريب نموذج واحد لكل ساق مستهدف على المخطط الطيفي لحجم الخليط. النواة عبارة عن LSTM ثنائي الاتجاه ثلاثي الطبقات ملفوف بطبقات متصلة بالكامل، والتي تتنبأ بقناع طيفي للمصدر المستهدف. نظرًا لأنه يعمل على الحجم، فإنه يعيد استخدام طور الخليط ويعيد بناء الجذع عبر STFT العكسي، ويتم تحسينه اختياريًا باستخدام مرشح Wiener متعدد القنوات. تم تدريبه على مجموعة بيانات MUSDB18 المفتوحة، ولا يطارد أعلى النتائج في لوحة المتصدرين؛ هدفها هو الوضوح وقابلية التكرار، مما يمنح المجتمع نقطة مقارنة جديرة بالثقة وأساسًا للبناء عليه.

البصيرة الفنية

كل ساق لديه شبكته الخاصة التي تعمل على الرسم الطيفي لحجم الإدخال. يتم توحيد صناديق التردد وتقليل الأبعاد بواسطة طبقة كثيفة، وتلتقط LSTM ثنائية الاتجاه السياق الزمني في كلا الاتجاهين، وتمتد الطبقات الكثيفة الإضافية مرة أخرى إلى دقة التردد الكاملة لإنتاج قناع ناعم. ضرب القناع بحجم الخليط يعطي المصدر المقدر؛ يتم إعادة استخدام المرحلة الأصلية، ويمكن لمرشح وينر تحسين جميع السيقان بشكل مشترك للحصول على نتائج أنظف.

التأثير الاستراتيجي

الوصول والوصول

يعمل على تحسين إمكانية الوصول من خلال واجهات النسخ والسرد والصوت.

التكلفة والميزانية

يمكن للفرق الإعلامية شحن الصوت المصقول بشكل أسرع بميزانيات أصغر.

السرعة والحجم

يمكن للأنظمة التي تواجه العملاء معالجة التفاعلات المنطوقة على نطاق أوسع.

مستقبل فصل الموسيقى المفتوح

لقد تم تجاوز Open-Unmix من حيث الجودة الأولية من خلال نماذج الشكل الموجي مثل Demucs وأنظمة الشكل الموجي الطيفي الهجين، ولكن دورها كمرجع واضح وقابل للاختراق يبقيها ذات صلة بالتدريس والنماذج الأولية السريعة. توقع استمرار الاستخدام في التعليم وكخط أساس للتحقق من الصحة العقلية، بينما يتحرك المجال الأوسع نحو الفواصل الهجينة عالية الدقة والمبنية على المحولات ونحو فصل فئات الأدوات الأكثر دقة.

التنفيذ في العالم الحقيقي

استخراج مسار صوتي معزول لإنشاء نسخة كاريوكي أو نسخة آلية من الأغنية.

سحب سيقان الطبلة أو الجهير لإعادة المزج وأخذ العينات من قبل المنتجين.

بمثابة خط أساس بحثي قابل للتكرار لتقييم نماذج الفصل الجديدة على MUSDB18.

السماح لطلاب الموسيقى بعزل أداة واحدة لدراسة دورها في المزيج.

المخاطر والدرابزين

تزداد مخاطر إساءة استخدام الصوت وانتحال الشخصية عند فقدان الموافقة.

يمكن أن تنخفض الدقة عبر اللهجات أو اللهجات أو البيئات الصاخبة.

يمكن الخلط بين الصوت الاصطناعي والكلام الأصيل دون تصنيف واضح.

خارطة طريق التنفيذ

1

الحصول على موافقة صريحة لالتقاط الصوت واستنساخه وإعادة استخدامه.

2

اختبار الجودة عبر مكبرات الصوت المتنوعة وظروف الخلفية.

3

تحديد متى يجب على الإنسان مراجعة المخرجات أو الموافقة عليها.

4

قم بتسمية الصوت الاصطناعي واحتفظ بسجلات المصدر للمساءلة.

استمر في الاستكشاف

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Open-Unmix Music Separation quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

ابدأ الاختبار

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

الأسئلة المتداولة

What is Open-Unmix Music Separation?

Open-Unmix (UMX) هو نظام تعليمي عميق مفتوح المصدر يقسم الأغنية إلى أجزائها: غناء، وطبول، وباس، وأدوات أخرى. إنه مهم كخط أساس قابل للتكرار وذو جودة مرجعية جعل فصل مصدر الموسيقى في متناول الباحثين والموسيقيين والهواة.

ماذا يفعل Open-Unmix؟

Open-Unmix هو نظام فصل مصدر الموسيقى الذي يقسم الخليط إلى أداة فردية وسيقان صوتية.

ما هي الشبكة العصبية الموجودة في قلب Open-Unmix؟

يتنبأ Open-Unmix بوجود قناع طيفي باستخدام LSTM ثنائي الاتجاه ملفوف بطبقات متصلة بالكامل.

على أي تمثيل يعمل Open-Unmix؟

وهو يعمل على مخططات طيفية الحجم، ويتنبأ بالقناع ويعيد استخدام مرحلة الخليط لإعادة البناء.

ما هي مجموعة البيانات التي تم تدريب Open-Unmix عليها؟

يستخدم Open-Unmix مجموعة بيانات فصل الموسيقى المفتوحة MUSDB18 للتدريب والتقييم.

ما هو هدف التصميم الرئيسي لـ Open-Unmix؟

لقد تم بناؤه كخط أساس واضح وموثق جيدًا وقابل للتكرار وليس كصندوق أسود عالي الدرجات.