À suivreGuide suivant
Génération de musique symbolique
IA audio
GUIDE de l'IA audio
Transcription automatique de la musique
La transcription automatique de la musique (AMT) convertit un enregistrement audio brut de musique en une notation symbolique comme une partition, du MIDI ou un rouleau de piano.
Écoutez ce guideNarré par l'IA · ~2 min
Sur cette page2 minutes de lecture
Aperçu
It tackles one of the hardest problems in audio AI: untangling many overlapping notes played at once.
Plongée profonde
Les systèmes AMT écoutent une forme d'onde audio et indiquent quelles notes sont jouées, quand elles commencent, combien de temps elles durent et parfois quel instrument les joue. Le principal défi est la polyphonie : lorsque plusieurs notes sonnent simultanément, leurs harmoniques se chevauchent et se confondent dans le spectre de fréquences, de sorte qu'un do et un sol peuvent être difficiles à séparer d'une seule note plus forte. Les systèmes modernes convertissent l'audio en une représentation temps-fréquence telle qu'un spectrogramme Mel ou une transformation Constant-Q, puis utilisent des réseaux neuronaux profonds pour prédire les débuts, décalages et hauteurs des notes. Le modèle Onsets and Frames de Google a été une référence en matière de transcription pour piano, tandis que les modèles de transformateur plus récents comme MT3 transcrivent plusieurs instruments à la fois.
Mise en œuvre dans le monde réel
AnthemScore et applications similaires convertissant les enregistrements MP3 en partitions modifiables pour les musiciens apprenant des chansons à l'oreille
Extraction MIDI d'un enregistrement de piano afin qu'un producteur puisse ré-exprimer ou quantifier la performance dans une DAW
Outils d'éducation musicale qui comparent les notes jouées par un élève à la partition pour signaler les notes erronées ou manquées
Musicologues transcrivant des enregistrements historiques ou improvisés (comme des solos de jazz) en notation pour analyse
L’avenir de la transcription automatique de la musique
AMT passe du piano solo à une transcription multi-instruments et complète fiable, comprenant la batterie, le chant et des techniques expressives comme les bends et le vibrato. Les architectures de transformateurs formées sur de grands ensembles de données synthétiques et alignées comblent l’écart. Attendez-vous à une intégration plus étroite avec la séparation des sources, la transcription en temps réel pour les performances en direct et des outils qui capturent le micro-timing et la dynamique, pas seulement les notes. L’objectif à long terme est un système qui transforme n’importe quel enregistrement en partition modifiable et lisible par l’homme.
Le mettre en pratique
Pourquoi c'est important
- Accès et portée. Il améliore l'accessibilité grâce à la transcription, à la narration et aux interfaces vocales.
- Coût et budget. Les équipes médias peuvent produire un son de qualité plus rapidement avec des budgets plus réduits.
- Vitesse et échelle. Les systèmes orientés client peuvent traiter les interactions orales à plus grande échelle.
Attention à
- Les risques d’utilisation abusive de la voix et d’usurpation d’identité augmentent lorsque le consentement fait défaut.
- La précision peut chuter en fonction des accents, des dialectes ou des environnements bruyants.
- L’audio synthétique peut être confondu avec une parole authentique sans étiquetage clair.
Prochaines étapes
- Obtenez un consentement explicite pour la capture vocale, le clonage et la réutilisation.
- Testez la qualité sur divers locuteurs et conditions d’arrière-plan.
- Définissez quand un humain doit examiner ou approuver les résultats.
- Étiquetez l’audio synthétique et conservez des enregistrements de provenance pour des raisons de responsabilité.
Continuez à explorer
Newsletter gratuite
Recevez le briefing quotidien sur l'IA
Trois histoires d'IA vérifiées chaque matin de la semaine, écrites dans un anglais simple. Gratuit pour toujours, sans publicité.
Un e-mail chaque jour de la semaine. Désabonnez-vous en un clic. Nous ne vendons ni ne partageons jamais votre adresse.
Testez-vous
Take the Automatic Music Transcription quiz
Commentaires instantanés sur chaque réponse et un certificat partageable avec une pièce d'identité vérifiable une fois que vous avez réussi un cours.
Soutenez l’enseignement gratuit de l’IA. AI Understanding est une organisation à but non lucratif 501(c)(3) : pas de publicité, pas de paywall, jamais. Faire un don
Questions fréquemment posées
What is Automatic Music Transcription?
La transcription automatique de la musique (AMT) convertit un enregistrement audio brut de musique en une notation symbolique comme une partition, du MIDI ou un rouleau de piano. Il s’attaque à l’un des problèmes les plus difficiles de l’IA audio : démêler de nombreuses notes qui se chevauchent et jouées en même temps.
Que produit principalement la transcription automatique de la musique ?
AMT convertit un enregistrement audio en une notation symbolique telle que MIDI, un piano roll ou une partition décrivant les notes jouées.
Pourquoi la musique polyphonique est-elle particulièrement difficile à transcrire ?
Lorsque plusieurs notes sonnent en même temps, leurs harmoniques se chevauchent, ce qui rend difficile la séparation des hauteurs individuelles présentes.
Qu'est-ce qui était remarquable dans le modèle Onsets and Frames de Google ?
Les débuts et les images utilisaient une tête pour détecter les débuts de notes précis et une autre pour les hauteurs soutenues, les débuts contrôlant la sortie de l'image.
Pourquoi la transformation Constant-Q est-elle utile pour la musique ?
Les hauteurs musicales sont espacées de manière logarithmique (les octaves doublent en fréquence), et les cases espacées par les logs du CQT s'alignent naturellement sur cela.
À quoi fait référence un « début » dans la transcription ?
Un début est le moment aigu et énergique où une note démarre, qui est plus facile à localiser avec précision que son maintien.
Continuez à apprendre
Guides associés
Plus de guides sélectionnés pour ce sujet