Audio AI Itọsọna
Mel-Igbohunsafẹfẹ Cepstral iyeida
Mel-Frequency Cepstral Coefficients (MFCCs) jẹ akojọpọ awọn nọmba ti o ni akopọ ti o ṣe akopọ apẹrẹ ti iwọn igbohunsafẹfẹ ohun kan ni ọna ti eti eniyan ṣe akiyesi rẹ.
Gbọ si itọsọna yiiAI-ṣe afihan · ~2 min
Lori iwe yi2 min ka
Akopọ
Fun awọn ewadun wọn jẹ ẹya iṣẹ ẹṣin fun idanimọ ọrọ, idanimọ agbọrọsọ, ati itupalẹ orin.
Jin Dive
Awọn MVCC ṣe iyipada bibẹ kukuru ti ohun sinu aijọju awọn nọmba 13 ti o gba timbre rẹ. Opo opo gigun ti epo n gba fọọmu igbi, fọ si awọn fireemu ~ 25ms, ṣe iṣiro iwoye agbara nipasẹ iyipada Fourier, lẹhinna yi ipo igbohunsafẹfẹ pọ si iwọn mel, eyiti o fi aaye gba ọna ti cochlea ṣe: ni isalẹ 1kHz ati ni isunmọ loke. Awọn agbara mel jẹ titẹ-fisinuirindigbindigbin (mimicking Iro ti npariwo) ati nipari kọja nipasẹ kan ọtọ cosine iyipada, eyi ti o decorrelates wọn ati concentrates alaye sinu akọkọ diẹ iyeida. Abajade jẹ logan si ariwo ati ipolowo agbọrọsọ, eyiti o jẹ idi ti Ayebaye Hidden Markov Awoṣe ati awọn eto ọrọ Awoṣe Awoṣe Gaussian gbarale awọn MMFCs fẹrẹ to gbogbo agbaye ṣaaju ikẹkọ jinlẹ.
Real-World imuse
Awọn ẹya akositiki fun awọn idanimọ ọrọ HMM-GMM Ayebaye bii Sphinx kutukutu ati awọn eto HTK
Ijerisi agbọrọsọ ati diarization, iyatọ ti o sọrọ lori ipe kan
Isọri oriṣi orin ati titẹ itẹka orin (ibaramu ara Shazam timbre)
Ṣiṣawari awọn aṣiṣe ẹrọ tabi awọn ipe ẹranko lati inu ohun ni ile-iṣẹ ati ibojuwo bioacoustic
Ojo iwaju ti Mel-Igbohunsafẹfẹ Cepstral Coefficients
Ipari-si-opin jin awọn nẹtiwọki increasingly kọ awọn ẹya ara ẹrọ taara lati aise waveforms tabi log-mel spectrograms, mbẹ awọn DCT, ki MMFCs funfun ti wa ni ipare lati ipinle-ti-ti-aworan ASR. Sibẹsibẹ wọn jẹ olokiki fun iwuwo fẹẹrẹ, lori ẹrọ, ati awọn iṣẹ ṣiṣe data kekere: iranran ọrọ koko, iṣawari iṣẹ ṣiṣe ohun, itẹka ohun, ati bioacoustics. Reti awọn MFCC lati tẹsiwaju bi imunadoko, ipilẹ ti o le tumọ paapaa bi awọn opin iwaju ti kọ ẹkọ ṣe jẹ gaba lori awọn awoṣe nla.
Fifi o sinu iwa
Kini idi ti o ṣe pataki
- Wiwọle ati arọwọto. O ṣe ilọsiwaju iraye si nipasẹ transcription, alaye, ati awọn atọkun ohun.
- Iye owo ati isuna. Awọn ẹgbẹ Media le firanṣẹ ohun didan yiyara pẹlu awọn isuna-owo kekere.
- Iyara ati iwọn. Awọn ọna ṣiṣe ti nkọju si alabara le ṣe ilana awọn ibaraẹnisọrọ sisọ ni iwọn nla.
Ṣọra fun
- ilokulo ohun ati awọn ewu afarawe ṣe pọ si nigbati igbanilaaye ba sonu.
- Yiye le ju silẹ kọja awọn asẹnti, awọn ede-ede, tabi awọn agbegbe alariwo.
- Ohun afetigbọ sintetiki le jẹ aṣiṣe fun ọrọ ododo laisi isamisi to yege.
Next awọn igbesẹ
- Gba ifọkansi ti o fojuhan fun gbigba ohun, ti ẹda, ati ilotunlo.
- Didara idanwo kọja awọn agbohunsoke oniruuru ati awọn ipo abẹlẹ.
- Ṣetumo nigbati eniyan gbọdọ ṣe atunyẹwo tabi fọwọsi awọn abajade.
- Aami ohun sintetiki ki o tọju awọn igbasilẹ provenance fun iṣiro.
Tesiwaju Ṣiṣawari
Ìwé ìròyìn ọfẹ
Gba ìkànìyàn AI ojoojúmọ́
Ìtàn AI mẹta tó jẹ́rìí ní gbogbo owurọ́ ọjọ́ iṣẹ́, kọ́wé ní Gẹ̀ẹ́sì tó rọrùn. Ọfẹ́ fún gbogbo àkókò, kò sí ìpolówó.
Ìmeèlì kan ní gbogbo ọjọ́ iṣẹ́. Yọkúrò ní ìkànìyàn ní ìkànìyàn kan. A kò ta tàbí pín àdírẹ́sì rẹ.
Ṣe idanwo fun ara rẹ
Take the Mel-Frequency Cepstral Coefficients quiz
Ìdáhùn lẹ́sẹ̀kẹsẹ̀ lórí gbogbo ìdáhùn, àti iwe-ẹ̀rí tó lè pin pẹ̀lú ID tó lè jẹ́rìí lẹ́yìn tí o bá kọ́ ẹ̀kọ́.
Ṣe àtìlẹ́yìn ẹ̀kọ́ AI ọfẹ́. AI Understanding jẹ́ àjọ àìní èrè 501(c)(3) — kò sí ìpolówó, kò sí àkúnya owó, ní gbogbo àkókò. Ṣe ẹbun kan
Awọn ibeere ti a beere nigbagbogbo
Kini Mel-Igbohunsafẹfẹ Cepstral Coefficients?
Mel-Frequency Cepstral Coefficients (MFCCs) jẹ akojọpọ awọn nọmba ti o ni akopọ ti o ṣe akopọ apẹrẹ ti iwọn igbohunsafẹfẹ ohun kan ni ọna ti eti eniyan ṣe akiyesi rẹ. Fun awọn ewadun wọn jẹ ẹya iṣẹ ẹṣin fun idanimọ ọrọ, idanimọ agbọrọsọ, ati itupalẹ orin.
Kini 'mel' ni MFCC tọka si?
Iwọn mel naa nfa igbohunsafẹfẹ ki awọn igbesẹ dogba dun dọgbadọgba yato si awọn eniyan, ti o ni aye daradara ni awọn iwọn kekere ati ni aipe ni awọn ti o ga.
Iyipada wo ni a lo nikẹhin lati ṣe agbejade awọn iye-iye cepstral?
Lẹhin ti awọn agbara log-mel ti wa ni iṣiro, iyipada cosine ọtọtọ kan ṣe atunṣe wọn ati akopọ alaye sinu awọn iye-iye akọkọ akọkọ.
Kilode ti awọn MFCC ṣe logan si ipolowo agbọrọsọ?
Awọn iye-iye cepstral kekere gba apoowe ohun-iwe (akoonu foonu) lakoko ti awọn giga gba ipolowo, nitorina titọju awọn kekere de-tẹnumọ ipolowo.
Ni aijọju melo ni iye awọn iyeida MMFC ni a tọju ni igbagbogbo fun fireemu kan?
Yiyan ti o wọpọ jẹ nipa awọn iye-iye 13, nigbakan a ṣe afikun pẹlu awọn deltas wọn, eyiti o ṣe akopọ timbre ni akopọ.
Kilode ti a fi lo log naa si awọn okunagbara mel-band?
Iro ohun ariwo eniyan jẹ aijọju logarithmic, nitorinaa funmorawon log jẹ ki awọn ẹya ara ẹrọ naa dara ni ibamu pẹlu iwoye ati ki o ṣe iduroṣinṣin iwọn to ni agbara.
Tesiwaju kikọ
Jẹmọ awọn itọsọna
Awọn itọsọna diẹ sii ti a yan fun koko yii