SıradakiSonraki rehber
Mel Spektrogramları
Ses Yapay Zekası
Ses AI KILAVUZU
Mel-Frekans Cepstral Katsayıları (MFCC'ler), bir sesin frekans spektrumunun şeklini insan kulağının algıladığı şekilde özetleyen kompakt bir sayı kümesidir.
Bu kılavuzu dinleyinAI tarafından anlatılan · ~2 min
Onlarca yıldır konuşma tanıma, konuşmacıyı tanımlama ve müzik analizi için en güçlü özelliktiler.
MFCC'ler, kısa bir ses dilimini, sesin tınısını yakalayan yaklaşık 13 sayıya dönüştürür. Boru hattı, dalga biçimini alır, onu ~25 ms'lik karelere böler, Fourier dönüşümü yoluyla bir güç spektrumu hesaplar, ardından frekans eksenini, bantları kokleanın yaptığı gibi aralıklandıran mel ölçeğine dönüştürür: 1 kHz'in ince altında ve kabaca üstünde. Mel enerjileri log-sıkıştırılır (ses yüksekliği algısını taklit eder) ve son olarak ayrı bir kosinüs dönüşümünden geçirilir, bu da onları ilişkisizleştirir ve bilgiyi ilk birkaç katsayıya yoğunlaştırır. Sonuç, gürültüye ve hoparlör perdesine karşı dayanıklıdır; bu nedenle klasik Gizli Markov Modeli ve Gauss Karışım Modeli konuşma sistemleri, derin öğrenmeden önce neredeyse evrensel olarak MFCC'lere güveniyordu.
İlk Sphinx ve HTK sistemleri gibi klasik HMM-GMM konuşma tanıyıcılar için akustik özellikler
Konuşmacı doğrulama ve günlük tutma, görüşmede kimin konuştuğunu ayırt etme
Müzik türü sınıflandırması ve şarkı parmak izi alma (Shazam tarzı tını eşleştirme)
Endüstriyel ve biyoakustik izlemede makine arızalarını veya hayvan çağrılarını sesten algılama
Uçtan uca derin ağlar, DCT'yi atlayarak giderek daha fazla özellikleri doğrudan ham dalga formlarından veya log-mel spektrogramlarından öğreniyor, böylece saf MFCC'ler son teknoloji ürünü ASR'den kayboluyor. Yine de hafif, cihaz içi ve az veri gerektiren görevler için popülerliğini koruyorlar: anahtar kelime belirleme, ses etkinliği algılama, ses parmak izi alma ve biyoakustik. MFCC'lerin, öğrenilmiş ön uçlar büyük modellere hakim olsa bile verimli, yorumlanabilir bir temel olarak varlığını sürdürmesini bekleyin.
Ücretsiz bülten
Hafta içi her sabah sade İngilizce yazılmış, doğrulanmış üç yapay zeka hikayesi. Sonsuza kadar ücretsiz, reklam yok.
Hafta içi her gün bir e-posta. Tek tıklamayla aboneliğinizi iptal edin. Adresinizi asla satmayız veya paylaşmayız.
Kendinizi test edin
Her yanıtla ilgili anında geri bildirim ve bir kursu geçtiğinizde doğrulanabilir bir kimliğe sahip paylaşılabilir bir sertifika.
Ücretsiz AI eğitimini destekleyin. AI Understanding, bir 501(c)(3) kâr amacı gütmeyen kuruluştur; hiçbir zaman reklam yoktur, ödeme duvarı yoktur. Bağış yap
Mel-Frekans Cepstral Katsayıları (MFCC'ler), bir sesin frekans spektrumunun şeklini insan kulağının algıladığı şekilde özetleyen kompakt bir sayı kümesidir. Onlarca yıldır konuşma tanıma, konuşmacıyı tanımlama ve müzik analizi için en güçlü özelliktiler.
Mel ölçeği frekansı çarpıtır, böylece eşit adımlar insanlara eşit uzaklıkta, düşük frekanslarda ince aralıklı, yüksek frekanslarda ise kaba olarak duyulur.
Log-mel enerjileri hesaplandıktan sonra, ayrı bir kosinüs dönüşümü bunların ilişkisini bozar ve bilgileri ilk birkaç katsayıya paketler.
Düşük cepstral katsayılar ses yolu zarfını (fonetik içerik) yakalarken, yüksek olanlar perdeyi yakalar, böylece düşük olanları tutmak perdenin önemini azaltır.
Yaygın bir seçim, bazen deltalarıyla artırılan ve tınıyı kompakt bir şekilde özetleyen yaklaşık 13 katsayıdır.
İnsanın ses yüksekliği algısı kabaca logaritmiktir, bu nedenle log sıkıştırma, özelliklerin algılamayla daha iyi eşleşmesini sağlar ve dinamik aralığı stabilize eder.
Öğrenmeye devam et
Bu konu için daha fazla rehber seçildi
SıradakiSonraki rehber
Mel Spektrogramları
Ses Yapay Zekası