A seguirPróximo guia
Marcação automática de música
IA de áudio
GUIA de IA de áudio
Recuperação de informações musicais (MIR) é o campo que ensina computadores a analisar, compreender e pesquisar músicas a partir de sinais de áudio e partituras.
Ouça este guiaNarrado por IA · ~2 min
Ele potencializa tudo, desde a identificação de músicas no estilo Shazam até as recomendações do Spotify e marcação automática de músicas.
A recuperação de informações musicais fica na interseção do processamento de sinais, aprendizado de máquina e musicologia. Os pesquisadores extraem recursos do áudio, como espectrograma, coeficientes cepstrais de frequência mel (MFCCs), vetores de croma e andamento para capturar tom, timbre, ritmo e harmonia. A partir deles, os sistemas MIR realizam tarefas como rastreamento de batidas, detecção de tons, classificação de gênero, extração de melodias, identificação de covers e recomendação de músicas. A conferência anual ISMIR e a campanha de avaliação MIREX impulsionaram o progresso desde 2000. O MIR moderno utiliza cada vez mais aprendizagem profunda, treinando redes convolucionais e de transformadores diretamente em espectrogramas e incorporações de áudio auto-supervisionadas, substituindo muitos recursos artesanais, enquanto ainda depende de conceitos de teoria musical para rotular e interpretar resultados.
Shazam e aplicativos semelhantes identificam uma música de uma gravação barulhenta de telefone usando impressões digitais de áudio
Spotify e Apple Music gerando recomendações e listas de reprodução automáticas a partir de similaridade de áudio aprendida
Marcação automática de humor, gênero e instrumentos para enormes bibliotecas de música de produção e estoque de áudio
Detectando versões cover e possíveis correspondências de direitos autorais em plataformas como o Content ID do YouTube
O MIR está migrando para grandes modelos de áudio auto-supervisionados que aprendem representações musicais gerais de milhões de faixas não rotuladas e, em seguida, fazem ajustes finos para tarefas específicas com poucos dados rotulados. Espere uma integração mais estreita com modelos musicais generativos, pesquisa musical em linguagem natural ("encontre uma faixa jazzística otimista com pincéis") e melhor manuseio de tradições não-ocidentais que o croma padrão e os modelos principais negligenciam. Os sistemas multimodais que combinam áudio, letras, partituras e metadados tornarão a recomendação e a descoberta muito mais diferenciadas e personalizadas.
Boletim informativo gratuito
Três histórias verificadas de IA a cada manhã de dia útil, escritas em linguagem simples. Gratuito para sempre, sem anúncios.
Um e-mail a cada dia útil. Cancele a inscrição com um clique. Nunca vendemos ou compartilhamos seu endereço.
Teste você mesmo
Feedback instantâneo sobre cada resposta e um certificado compartilhável com um ID verificável assim que você concluir um curso.
Apoie a educação gratuita em IA. O AI Understanding é uma organização sem fins lucrativos 501(c)(3) — sem anúncios, sem paywall, nunca. Faça uma doação
Recuperação de informações musicais (MIR) é o campo que ensina computadores a analisar, compreender e pesquisar músicas a partir de sinais de áudio e partituras. Ele potencializa tudo, desde a identificação de músicas no estilo Shazam até as recomendações do Spotify e marcação automática de músicas.
Os recursos do Chroma dobram a energia de todas as oitavas em 12 classes de tons, tornando-os adequados para harmonia, acordes e análise de tons.
A Transformada de Fourier de Curto Tempo produz o espectrograma, a base para a maioria dos recursos e modelos MIR.
A impressão digital cria hashes compactos e robustos de ruído de picos de áudio que são comparados com um banco de dados indexado.
ISMIR, a conferência da Sociedade Internacional para Recuperação de Informação Musical, é o local central para o campo.
A aprendizagem auto-supervisionada extrai a estrutura musical geral do áudio não rotulado, reduzindo a necessidade de conjuntos de dados dispendiosos rotulados manualmente.
Continue aprendendo
Mais guias escolhidos para este tópico
A seguirPróximo guia
Marcação automática de música
IA de áudio