MWONGOZO WA AI wa Sauti

Zana ya Utambuzi wa Hotuba ya Kaldi

Kaldi ni zana isiyolipishwa ya chanzo-wazi ambayo ikawa jukwaa kuu la utafiti la kujenga mifumo ya utambuzi wa usemi.

dk 2 kusomaIlisasishwa mwisho

Muhtasari

It matters because for nearly a decade it was the go-to foundation for academic and industrial ASR work.

Dive ya kina

Kaldi, iliyotolewa mwaka wa 2011 na kuongozwa na Daniel Povey, imeandikwa katika C++ na mapishi yaliyounganishwa pamoja na maandishi ya bash na Perl. Ilijengwa kwenye bomba la kawaida la ASR: toa vipengele vya akustika (MFCCs au benki za vichungi), sauti za fonimu za modeli zilizo na Miundo ya Mchanganyiko ya Gaussian au, baadaye, mitandao ya kina ya neva, na kuchanganya modeli ya akustika, leksimu ya matamshi, na modeli ya lugha katika grafu moja inayoweza kutafutwa. Chaguo lake la kiufundi lilikuwa ni kutumia vibadilishaji data vya hali-malizi (WFSTs) kutoka maktaba ya OpenFST kutunga vyanzo vyote vya maarifa katika grafu moja ya kusimbua. Kaldi alisafirisha 'mapishi' ya seti za data za kawaida kama vile Switchboard, Librispeech, na Wall Street Journal, kuruhusu watafiti kutoa matokeo ya hali ya juu. Ikawa utekelezaji wa marejeleo ambayo mifumo mipya iliwekwa alama.

Ufahamu wa Kiufundi

Mbinu kuu ya Kaldi ni kutunga WFST nne katika grafu moja iitwayo HCLG: H ramani za neural-net au mataifa ya GMM hadi simu zinazotegemea muktadha, C hushughulikia muktadha wa kifonetiki (triphone), L ni leksimu ya matamshi ya kuchora ramani ya simu kwa maneno, na G ni modeli ya lugha. Kuzidisha vibadilishaji sauti hivi na kuboresha matokeo hutoa grafu moja ambayo kisimbuzi hutafuta kwa kutumia algoriti ya Viterbi iliyokatwa kwa boriti, na kugeuza fremu za sauti kuwa mfuatano unaowezekana zaidi wa maneno kwa ufanisi.

Athari za kimkakati

Kufikia na kufikia

Huboresha ufikiaji kupitia manukuu, simulizi na violesura vya sauti.

Cost and budget

Timu za media zinaweza kusafirisha sauti iliyoboreshwa haraka na bajeti ndogo.

Kasi na kiwango

Mifumo inayowakabili wateja inaweza kuchakata mwingiliano wa mazungumzo kwa kiwango kikubwa.

Mustakabali wa Zana ya Utambuzi wa Usemi wa Kaldi

Mbinu mseto ya Kaldi ya HMM-DNN imechukuliwa kwa kiasi kikubwa na miundo ya mwisho-mwisho ya neural ambayo hupanga sauti moja kwa moja kwenye maandishi. Mradi mrithi wa Daniel Povey, k2 (pamoja na mfumo ikolojia wa Icefall na Lhotse), hufikiria upya mawazo ya Kaldi ya WFST katika PyTorch kwa kutumia otomatiki ya hali ya mwisho inayoweza kutofautishwa. Tarajia Kaldi yenyewe kubaki marejeleo ya kihistoria na zana ya kufundishia, huku vizazi vyake vya dhana vikiunganisha usimbaji wa muundo wa kitamaduni na miundo ya akustika ya kisasa inayojitegemea na inayojisimamia yenyewe.

Utekelezaji wa Ulimwengu Halisi

Maabara za kitaaluma zinazozalisha tena alama za Librispeech na Switchboard ili kuthibitisha utafiti mpya wa kielelezo cha akustisk.

Kuunda mifumo maalum ya amri za sauti kwa lugha zenye rasilimali kidogo au lugha chache kwa kutumia mapishi ya Kaldi

Upangaji wa sauti uliolazimishwa kwa nakala za isimu, kuunda seti ya data na muda wa manukuu

Kuwezesha utafutaji wa mapema kwa kutamka na imla kunasaidia katika sekta kabla ya miundo ya mwisho hadi mwisho kukomaa

Hatari & Walinzi

Hatari za matumizi mabaya ya sauti na uigaji huongezeka wakati kibali kinakosekana.

Usahihi unaweza kushuka katika lafudhi, lahaja au mazingira yenye kelele.

Sauti ya syntetisk inaweza kudhaniwa kimakosa kuwa usemi halisi bila kuweka lebo wazi.

Ramani ya Utekelezaji

1

Pata idhini ya moja kwa moja ya kunasa sauti, kuunda na kutumia tena.

2

Jaribu ubora kwenye spika na hali mbalimbali za usuli.

3

Bainisha wakati ni lazima binadamu akague au aidhinishe matokeo.

4

Weka lebo sauti ya sintetiki na uhifadhi rekodi za asili kwa uwajibikaji.

Endelea Kuchunguza

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Kaldi Speech Recognition Toolkit quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Anza chemsha bongo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Mwongozo unaofuata

Utambuzi wa Hotuba ya Whisper

Maswali yanayoulizwa mara kwa mara

What is Kaldi Speech Recognition Toolkit?

Kaldi ni zana isiyolipishwa ya chanzo-wazi ambayo ikawa jukwaa kuu la utafiti la kujenga mifumo ya utambuzi wa usemi. Ni muhimu kwa sababu kwa karibu muongo mmoja ilikuwa msingi wa kazi ya kitaaluma na ya viwanda ya ASR.

Ni lugha gani ya programu ambayo msingi wa Kaldi umeandikwa?

Msingi wa Kaldi umeandikwa katika C++ kwa ajili ya utendakazi, huku maandishi ya bash na Perl yakipanga mafunzo na maelekezo ya kusimbua.

Kaldi hutumia muundo gani wa hisabati kuchanganya modeli yake ya akustisk, leksimu na modeli ya lugha kuwa grafu moja ya kusimbua?

Kaldi hutunga WFST kutoka kwa maktaba ya OpenFST hadi kwenye grafu moja ya HCLG ambayo kisimbuaji hutafuta.

Je, ni nani muundaji mkuu na kiongozi mkuu wa mradi wa Kaldi?

Daniel Povey aliongoza ukuzaji wa Kaldi, iliyotolewa kwa mara ya kwanza mnamo 2011, na baadaye akaanza mradi mrithi wa k2.

Katika bomba la kawaida la Kaldi, GMMs (Miundo ya Mchanganyiko wa Gaussian) zilitumika nini awali kuiga?

GMM ziliiga uwezekano wa akustika wa hali za fonimu kabla ya mitandao ya kina ya neva kuchukua nafasi yake katika mifumo mseto.

Jina la mfumo wa ikolojia wa mrithi wa Kaldi unaotegemea PyTorch ni nini?

k2, pamoja na Icefall na Lhotse, hutekeleza mawazo ya hali ya kikomo ya Kaldi katika umbo linaloweza kutofautishwa, linalofaa kwa PyTorch.