ДаліНаступний посібник
Band-Split RoFormer для розділення музики
Аудіо AI
Аудіо AI GUIDE
Розділення музики «Відкрити-Розмікшувати».
Open-Unmix (UMX) — це система глибокого навчання з відкритим кодом, яка розділяє пісню на частини: вокал, ударні, бас та інші інструменти.
Послухайте цей посібникШІ-розказаний · ~2 min
На цій сторінці2 хвилини читання
Огляд
It matters as a reproducible, reference-quality baseline that made music source separation accessible to researchers, musicians, and hobbyists.
Глибоке занурення
Open-Unmix (UMX) is an open reference implementation for music source separation. It provides models for vocals, drums, bass, and other instruments, with the reference system trained on MUSDB18. Its design favors clarity and reproducibility as a baseline for research. In the core spectrogram model, a target-specific network predicts a mask for the mixture magnitude; reconstruction uses the mixture phase, and a multichannel Wiener filter can optionally refine the estimated stems. Current project variants may differ in training data and input/output interfaces, so claims here refer to the original reference approach.
Реалізація в реальному світі
Виділення ізольованої вокальної доріжки для створення караоке або інструментальної версії пісні.
Витягування барабанів або бас-гитари для реміксування та семплювання продюсерами.
Служить відтворюваною дослідницькою базою для оцінки нових моделей поділу на MUSDB18.
Дозвольте студентам-музикантам виділити один інструмент для вивчення його партії в міксі.
Майбутнє розділення музики Open-Unmix
Open-Unmix був випереджений за необробленою якістю такими моделями хвилі, як Demucs і гібридними системами спектрограми-сигналу, але його роль як чіткого довідника, який можна зламати, зберігає його актуальність для навчання та швидкого прототипування. Очікуйте подальше використання в освіті та як базову лінію для перевірки працездатності, тоді як ширша сфера рухається до гібридних і трансформаторних сепараторів з високою точністю та до розділення більш детальних категорій інструментів.
Застосування на практиці
Чому це важливо
- Доступ і охоплення. Це покращує доступність завдяки транскрипції, дикторському тексту та голосовому інтерфейсу.
- Вартість і бюджет. Медіа-команди можуть доставляти якісний аудіо швидше за менші бюджети.
- Швидкість і масштаб. Системи, орієнтовані на клієнта, можуть обробляти голосову взаємодію у більшому масштабі.
Зверніть увагу на
- Ризик неправильного використання голосу та видавання себе за іншу особу зростає, якщо згоди немає.
- Точність може впасти через акценти, діалекти чи шумне середовище.
- Синтетичне аудіо можна прийняти за автентичне мовлення без чіткого маркування.
Наступні кроки
- Отримайте чітку згоду на захоплення голосу, клонування та повторне використання.
- Перевірте якість на різних динаміках і фонових умовах.
- Визначте, коли людина повинна переглядати або затверджувати результати.
- Позначайте синтетичне аудіо та зберігайте записи про походження для підзвітності.
Продовжуйте досліджувати
Безплатний розсилок
Отримуйте щоденне зведення новин про ШІ
Три перевірені історії про ШІ щоробочого ранку, написані простою мовою. Безплатно назавжди, без реклами.
Один лист щотижня з понеділка по п'ятницю. Відписатися в один клік. Ми ніколи не продаємо та не передаємо вашу адресу.
Перевір себе
Take the Open-Unmix Music Separation quiz
Миттєва зворотна связь на кожну відповідь та сертифікат із перевіреним ідентифікатором, яким можна поділитися, після проходження курсу.
Підтримайте безплатну освіту у сфері ШІ. AI Understanding — це некомерційна організація 501(c)(3) — без реклами, без платних стін, назавжди. Зробіть пожертву
Часті запитання
What is Open-Unmix Music Separation?
Open-Unmix (UMX) — це система глибокого навчання з відкритим кодом, яка розділяє пісню на частини: вокал, ударні, бас та інші інструменти. Це має значення як відтворювана базова лінія еталонної якості, яка зробила розділення музичних джерел доступним для дослідників, музикантів і любителів.
Що робить Open-Unmix?
Open-Unmix — це система розділення музичних джерел, яка розділяє мікс на окремі інструменти та вокал.
Яка нейронна мережа лежить в основі Open-Unmix?
Open-Unmix передбачає спектральну маску за допомогою двонаправленого LSTM, обгорнутого повністю пов’язаними шарами.
На якому представленні працює Open-Unmix?
Він працює на спектрограмах величини, прогнозуючи маску та повторно використовуючи фазу суміші для реконструкції.
На якому наборі даних Open-Unmix навчається?
Open-Unmix використовує відкритий набір даних розділення музики MUSDB18 для навчання та оцінки.
Якою була головна мета дизайну Open-Unmix?
Його створено як чітку, добре задокументовану, відтворювану базову лінію, а не як чорну скриньку з найвищими балами.
Продовжуйте вчитися
Пов'язані посібники
Інші посібники, вибрані для цієї теми