À suivreGuide suivant
Marquage automatique de la musique
IA audio
GUIDE de l'IA audio
Récupération d'informations musicales
La recherche d'informations musicales (MIR) est le domaine qui apprend aux ordinateurs à analyser, comprendre et rechercher de la musique à partir de signaux audio et de partitions.
Écoutez ce guideNarré par l'IA · ~2 min
Sur cette page2 minutes de lecture
Aperçu
It powers everything from Shazam-style song identification to Spotify's recommendations and automatic music tagging.
Plongée profonde
La recherche d'informations musicales se situe à l'intersection du traitement du signal, de l'apprentissage automatique et de la musicologie. Les chercheurs extraient des caractéristiques de l'audio telles que le spectrogramme, les coefficients cepstraux de fréquence Mel (MFCC), les vecteurs de chrominance et le tempo pour capturer la hauteur, le timbre, le rythme et l'harmonie. À partir de ceux-ci, les systèmes MIR effectuent des tâches telles que le suivi des rythmes, la détection des touches, la classification des genres, l'extraction de la mélodie, l'identification des reprises et la recommandation musicale. La conférence annuelle ISMIR et la campagne d'évaluation MIREX ont permis des progrès depuis 2000. Le MIR moderne utilise de plus en plus l'apprentissage profond, la formation de réseaux convolutifs et de transformateurs directement sur des spectrogrammes et des intégrations audio auto-supervisées, remplaçant de nombreuses fonctionnalités artisanales tout en s'appuyant sur des concepts de théorie musicale pour étiqueter et interpréter les résultats.
Mise en œuvre dans le monde réel
Shazam et applications similaires identifiant une chanson à partir d'un enregistrement téléphonique bruyant à l'aide d'empreintes audio
Spotify et Apple Music génèrent des recommandations et des listes de lecture automatiques à partir de la similarité audio apprise
Marquage automatique de l'ambiance, du genre et des instruments pour d'énormes bibliothèques de musique de production et de stock audio
Détection des versions de couverture et des correspondances potentielles de droits d'auteur sur des plates-formes telles que YouTube Content ID
L'avenir de la recherche d'informations musicales
MIR s'oriente vers de grands modèles audio auto-supervisés qui apprennent les représentations musicales générales à partir de millions de pistes non étiquetées, puis les affinent pour des tâches spécifiques avec peu de données étiquetées. Attendez-vous à une intégration plus étroite avec les modèles de musique générative, à la recherche de musique en langage naturel (« trouvez un morceau jazzy optimiste avec des pinceaux ») et à une meilleure gestion des traditions non occidentales que la chrominance standard et les modèles clés négligent. Les systèmes multimodaux combinant l'audio, les paroles, les partitions et les métadonnées rendront la recommandation et la découverte beaucoup plus nuancées et personnalisées.
Le mettre en pratique
Pourquoi c'est important
- Accès et portée. Il améliore l'accessibilité grâce à la transcription, à la narration et aux interfaces vocales.
- Coût et budget. Les équipes médias peuvent produire un son de qualité plus rapidement avec des budgets plus réduits.
- Vitesse et échelle. Les systèmes orientés client peuvent traiter les interactions orales à plus grande échelle.
Attention à
- Les risques d’utilisation abusive de la voix et d’usurpation d’identité augmentent lorsque le consentement fait défaut.
- La précision peut chuter en fonction des accents, des dialectes ou des environnements bruyants.
- L’audio synthétique peut être confondu avec une parole authentique sans étiquetage clair.
Prochaines étapes
- Obtenez un consentement explicite pour la capture vocale, le clonage et la réutilisation.
- Testez la qualité sur divers locuteurs et conditions d’arrière-plan.
- Définissez quand un humain doit examiner ou approuver les résultats.
- Étiquetez l’audio synthétique et conservez des enregistrements de provenance pour des raisons de responsabilité.
Continuez à explorer
Newsletter gratuite
Recevez le briefing quotidien sur l'IA
Trois histoires d'IA vérifiées chaque matin de la semaine, écrites dans un anglais simple. Gratuit pour toujours, sans publicité.
Un e-mail chaque jour de la semaine. Désabonnez-vous en un clic. Nous ne vendons ni ne partageons jamais votre adresse.
Testez-vous
Take the Music Information Retrieval quiz
Commentaires instantanés sur chaque réponse et un certificat partageable avec une pièce d'identité vérifiable une fois que vous avez réussi un cours.
Soutenez l’enseignement gratuit de l’IA. AI Understanding est une organisation à but non lucratif 501(c)(3) : pas de publicité, pas de paywall, jamais. Faire un don
Questions fréquemment posées
What is Music Information Retrieval?
La recherche d'informations musicales (MIR) est le domaine qui apprend aux ordinateurs à analyser, comprendre et rechercher de la musique à partir de signaux audio et de partitions. Il gère tout, de l'identification des chansons de style Shazam aux recommandations de Spotify et au marquage automatique de la musique.
Quelles sont les fonctionnalités de chrominance principalement utilisées pour capturer dans MIR ?
Chroma présente l'énergie de toutes les octaves en 12 classes de hauteur, ce qui les rend bien adaptés à l'analyse des harmonies, des accords et des touches.
Quelle transformation constitue le plus souvent la première étape pour transformer l’audio en une représentation temps-fréquence ?
La transformée de Fourier à court terme produit le spectrogramme, fondement de la plupart des fonctionnalités et modèles MIR.
Sur quoi une application comme Shazam s’appuie-t-elle pour identifier une chanson ?
Les empreintes digitales créent des hachages compacts et résistants au bruit des pics audio qui sont comparés à une base de données indexée.
Quelle conférence annuelle est la plus associée à la recherche MIR ?
L'ISMIR, la conférence de la Société internationale pour la recherche d'informations musicales, est le lieu central de ce domaine.
Quel est l’avantage clé des modèles audio auto-supervisés dans le MIR moderne ?
L'apprentissage auto-supervisé extrait la structure musicale générale de l'audio non étiqueté, réduisant ainsi le besoin d'ensembles de données coûteux étiquetés à la main.
Continuez à apprendre
Guides associés
Plus de guides sélectionnés pour ce sujet