A continuaciónSiguiente guía
Espectrogramas Mel
IA de audio
GUÍA de IA en audio
Coeficientes cepstrales de frecuencia Mel
Los coeficientes cepstrales de frecuencia de fusión (MFCC) son un conjunto compacto de números que resumen la forma del espectro de frecuencias de un sonido tal como lo perciben los oídos humanos.
Escuche esta guíaNarrado por IA · ~2 min
En esta pagina2 minutos de lectura
Descripción general
For decades they were the workhorse feature for speech recognition, speaker identification, and music analysis.
Buceo profundo
Los MFCC convierten una pequeña porción de audio en aproximadamente 13 números que capturan su timbre. La tubería toma la forma de onda, la divide en fotogramas de ~25 ms, calcula un espectro de potencia mediante la transformada de Fourier y luego deforma el eje de frecuencia en la escala mel, que espacia las bandas de la misma manera que lo hace la cóclea: finamente por debajo de 1 kHz y gruesamente por encima. Las energías mel se comprimen logarítmicamente (imitando la percepción del volumen) y finalmente pasan a través de una transformada de coseno discreta, que las descorrelaciona y concentra la información en los primeros coeficientes. El resultado es resistente al ruido y al tono del altavoz, razón por la cual los sistemas de voz clásicos del modelo oculto de Markov y del modelo de mezcla gaussiana dependían de los MFCC casi universalmente antes del aprendizaje profundo.
Implementación en el mundo real
Funciones acústicas para reconocedores de voz HMM-GMM clásicos, como los primeros sistemas Sphinx y HTK
Verificación y registro del hablante, distinguiendo quién está hablando en una llamada
Clasificación de géneros musicales y toma de huellas digitales de canciones (coincidencia de timbres al estilo Shazam)
Detección de fallos de máquinas o gritos de animales a partir de audio en monitorización industrial y bioacústica
El futuro de los coeficientes cepstrales de frecuencia Mel
Las redes profundas de extremo a extremo aprenden cada vez más características directamente de formas de onda sin procesar o espectrogramas log-mel, omitiendo el DCT, por lo que los MFCC puros están desapareciendo del ASR de última generación. Sin embargo, siguen siendo populares para tareas livianas, en el dispositivo y con pocos datos: detección de palabras clave, detección de actividad de voz, huellas dactilares de audio y bioacústica. Espere que los MFCC persistan como una base eficiente e interpretable incluso cuando las interfaces aprendidas dominen los modelos grandes.
Poniéndolo en práctica
Por qué es importante
- Acceso y alcance. Mejora la accesibilidad a través de transcripción, narración e interfaces de voz.
- Costo y presupuesto. Los equipos de medios pueden enviar audio pulido más rápido con presupuestos más pequeños.
- Velocidad y escala. Los sistemas de cara al cliente pueden procesar interacciones habladas a mayor escala.
cuidado con
- Los riesgos de uso indebido de voz y suplantación de identidad aumentan cuando falta el consentimiento.
- La precisión puede disminuir según los acentos, los dialectos o los entornos ruidosos.
- El audio sintético puede confundirse con el habla auténtica sin un etiquetado claro.
Próximos pasos
- Obtenga consentimiento explícito para la captura, clonación y reutilización de voz.
- Pruebe la calidad en diversos oradores y condiciones de fondo.
- Defina cuándo un humano debe revisar o aprobar los resultados.
- Etiquete el audio sintético y mantenga registros de procedencia para la rendición de cuentas.
Sigue explorando
Boletín gratuito
Recibe el resumen diario de IA
Tres noticias verificadas sobre IA cada mañana de lunes a viernes, explicadas con claridad. Gratis para siempre y sin anuncios.
Un correo cada día laborable. Date de baja con un clic. Nunca vendemos ni compartimos tu dirección.
Ponte a prueba
Take the Mel-Frequency Cepstral Coefficients quiz
Corrección inmediata en cada respuesta y un certificado para compartir, con un ID verificable, cuando apruebas un curso.
Apoya la educación gratuita sobre IA. AI Understanding es una organización sin fines de lucro 501(c)(3): sin anuncios ni muros de pago, nunca. Hacer una donación
Preguntas frecuentes
What is Mel-Frequency Cepstral Coefficients?
Los coeficientes cepstrales de frecuencia de fusión (MFCC) son un conjunto compacto de números que resumen la forma del espectro de frecuencias de un sonido tal como lo perciben los oídos humanos. Durante décadas fueron el caballo de batalla para el reconocimiento de voz, la identificación de locutores y el análisis musical.
¿A qué se refiere el 'mel' en MFCC?
La escala mel deforma la frecuencia para que pasos iguales suenen igualmente alejados para los humanos, finamente espaciados en las frecuencias bajas y groseramente en las altas.
¿Qué transformada se aplica en último lugar para producir los coeficientes cepstrales?
Después de calcular las energías log-mel, una transformada de coseno discreta las descorrelaciona y empaqueta información en los primeros coeficientes.
¿Por qué los MFCC son relativamente resistentes al discurso de un orador?
Los coeficientes cepstrales bajos capturan la envolvente del tracto vocal (contenido fonético), mientras que los altos capturan el tono, por lo que mantener los bajos resta importancia al tono.
¿Aproximadamente cuántos coeficientes MFCC se mantienen normalmente por cuadro?
Una elección común son unos 13 coeficientes, a veces aumentados con sus deltas, que resumen de forma compacta el timbre.
¿Por qué se aplica el registro a las energías de la banda mel?
La percepción humana del volumen es aproximadamente logarítmica, por lo que la compresión logarítmica hace que las características coincidan mejor con la percepción y estabiliza el rango dinámico.
sigue aprendiendo
Guías relacionadas
Más guías seleccionadas para este tema.