A seguirPróximo guia
Geração de Música Simbólica
IA de áudio
GUIA de IA de áudio
A Transcrição Automática de Música (AMT) converte uma gravação de áudio bruta de música em uma notação simbólica, como partituras, MIDI ou um rolo de piano.
Ouça este guiaNarrado por IA · ~2 min
Ele aborda um dos problemas mais difíceis da IA de áudio: desembaraçar muitas notas sobrepostas tocadas ao mesmo tempo.
Os sistemas AMT ouvem uma forma de onda de áudio e emitem quais notas são tocadas, quando começam, quanto tempo duram e, às vezes, qual instrumento as toca. O principal desafio é a polifonia: quando várias notas soam simultaneamente, seus harmônicos se sobrepõem e se confundem no espectro de frequências, de modo que um único dó e um sol podem ser difíceis de separar de uma única nota mais alta. Os sistemas modernos convertem o áudio em uma representação de tempo-frequência, como um espectrograma mel ou Transformada Constant-Q, e então usam redes neurais profundas para prever o início, o deslocamento e o tom das notas. O modelo Onsets and Frames de Google foi um marco para a transcrição de piano, enquanto modelos de transformadores mais recentes, como o MT3, transcrevem vários instrumentos ao mesmo tempo.
AnthemScore e aplicativos semelhantes que convertem gravações de MP3 em partituras editáveis para músicos que aprendem músicas de ouvido
Extração MIDI de uma gravação de piano para que um produtor possa dar voz novamente ou quantizar a performance em um DAW
Ferramentas de educação musical que comparam as notas tocadas por um aluno com a partitura para sinalizar notas erradas ou perdidas
Musicólogos que transcrevem gravações históricas ou improvisadas (como solos de jazz) em notação para análise
AMT está mudando do piano solo para uma transcrição confiável de multiinstrumentos e banda completa, incluindo bateria, vocais e técnicas expressivas como bends e vibrato. As arquiteturas de transformadores treinadas em grandes conjuntos de dados sintéticos e alinhados estão preenchendo essa lacuna. Espere uma integração mais estreita com separação de fontes, transcrição em tempo real para apresentações ao vivo e ferramentas que capturam microtemporização e dinâmica, não apenas notas. O objetivo de longo prazo é um sistema que transforme qualquer gravação em partituras editáveis e legíveis por humanos.
Boletim informativo gratuito
Três histórias verificadas de IA a cada manhã de dia útil, escritas em linguagem simples. Gratuito para sempre, sem anúncios.
Um e-mail a cada dia útil. Cancele a inscrição com um clique. Nunca vendemos ou compartilhamos seu endereço.
Teste você mesmo
Feedback instantâneo sobre cada resposta e um certificado compartilhável com um ID verificável assim que você concluir um curso.
Apoie a educação gratuita em IA. O AI Understanding é uma organização sem fins lucrativos 501(c)(3) — sem anúncios, sem paywall, nunca. Faça uma doação
A Transcrição Automática de Música (AMT) converte uma gravação de áudio bruta de música em uma notação simbólica, como partituras, MIDI ou um rolo de piano. Ele aborda um dos problemas mais difíceis da IA de áudio: desembaraçar muitas notas sobrepostas tocadas ao mesmo tempo.
AMT converte uma gravação de áudio em uma notação simbólica, como MIDI, um piano roll ou partituras que descrevem as notas tocadas.
Quando várias notas soam ao mesmo tempo, seus harmônicos se sobrepõem, tornando difícil separar quais notas individuais estão presentes.
Onsets e Frames usavam um cabeçote para detectar inícios de notas precisos e outro para tons sustentados, com inícios controlando a saída do quadro.
Os tons musicais são espaçados logaritmicamente (oitavas dobram em frequência), e os compartimentos logarítmicos do CQT alinham-se naturalmente com isso.
Um início é o momento agudo e energético em que uma nota começa, que é mais fácil de localizar com precisão do que a sua sustentação.
Continue aprendendo
Mais guias escolhidos para este tópico
A seguirPróximo guia
Geração de Música Simbólica
IA de áudio