Audio AI JAGORA

Kayan aikin Gane Magana Kaldi

Kaldi kyauta ce, buɗaɗɗen kayan aikin kayan aiki wanda ya zama babban dandalin bincike don gina tsarin tantance magana.

Dubawa

Kaldi kyauta ce, buɗaɗɗen kayan aikin kayan aiki wanda ya zama babban dandalin bincike don gina tsarin tantance magana. Yana da mahimmanci saboda kusan shekaru goma shine tafi-zuwa tushe don aikin ASR na ilimi da masana'antu.

Kaldi Speech Gane Toolkit yana zaune a cikin ayyukan aiki na audio-AI wanda ke canza magana, kiɗa, da sauti don sadarwa, samun dama, da samar da kafofin watsa labarai.

Zurfafa nutsewa

Kaldi, wanda aka saki a cikin 2011 kuma Daniel Povey ya jagoranta, an rubuta shi a cikin C ++ tare da girke-girke da aka haɗa tare da rubutun bash da Perl. An gina shi akan bututun ASR na yau da kullun: cire fasalin sauti (MFCCs ko filterbanks), ƙirar ƙirar sauti tare da Gaussian Mixture Models ko, daga baya, hanyoyin sadarwa mai zurfi, da haɗa ƙirar sauti, ƙamus na furci, da ƙirar harshe cikin jadawali guda ɗaya da ake iya nema. Ma'anar zaɓinta na fasaha shine ta amfani da ma'auni masu ƙayyadaddun iyaka (WFSTs) daga ɗakin karatu na OpenFST don tsara duk tushen ilimi cikin jadawali guda ɗaya. Kaldi ya aika da 'kayan girke-girke' don daidaitattun saitunan bayanai kamar Switchboard, Librispeech, da Wall Street Journal, barin masu bincike su sake fitar da sakamako na zamani. Ya zama aiwatar da tunani wanda aka yiwa sabbin tsarin ƙima.

Fahimtar Fasaha

Babban dabarar Kaldi shine hada WFSTs guda hudu cikin jadawali daya da ake kira HCLG: H taswirorin neural-net ko jihohin GMM zuwa wayoyi masu dogaro da mahallin, C tana sarrafa mahallin sauti (wayoyin triphones), L shine ƙamus na taswirar wayoyi zuwa kalmomi, kuma G shine ƙirar harshe. Ƙirƙirar waɗannan masu fassara da haɓaka sakamakon yana samar da jadawali ɗaya mai ƙididdigewa yana bincika tare da tsinkewar Viterbi algorithm, yana mai da firam ɗin sauti cikin mafi kusantar jerin kalmomi da inganci.

Jagorar Kayan Aikin Gane Jawabin Kaldi

Kaldi kyauta ce, buɗaɗɗen kayan aikin kayan aiki wanda ya zama babban dandalin bincike don gina tsarin tantance magana. Yana da mahimmanci saboda kusan shekaru goma shine tafi-zuwa tushe don aikin ASR na ilimi da masana'antu. Kaldi Speech Gane Toolkit yana zaune a cikin ayyukan aiki na audio-AI wanda ke canza magana, kiɗa, da sauti don sadarwa, samun dama, da samar da kafofin watsa labarai. Don gina zurfin fahimta, bi Kaldi Speech Gane Toolkit a matsayin samfurin aiki, ba sifa ɗaya ba: ayyana sakamakon da ake so, fayyace zato, da raba abin da tsarin zai iya yi da dogaro daga abin da har yanzu ke buƙatar yanke hukunci na ƙwararru.

A aikace, ƙaƙƙarfan ƙungiyoyi masu amfani da Kaldi Speech Gane Toolkit suna ɗaukar inganci, jinkiri, da yarda a matsayin daidaitattun sassa na dabarun turawa. Suna rubuta ƙayyadaddun ƙa'idodin nasara, gwaji akan bayanan gaskiya da gudanawar aiki, da jujjuyawar bisa ga tsarin gazawar da aka lura maimakon cin nasara na lokaci ɗaya. Wannan shine inda fahimtar ka'idar ta juya zuwa iyawa mai dorewa a cikin samfura, manufofi, da ayyuka.

Yana inganta samun dama ta hanyar rubutu, ba da labari, da mu'amalar murya. A lokaci guda, rashin amfani da murya da haɗarin kwaikwaya yana ƙaruwa lokacin da aka rasa izini. Hanyar da ta fi dacewa ita ce haɗa saurin gwaji tare da horon gudanarwa: gudanar da matukin jirgi, kama shaida, buga rajistan ayyukan yanke shawara, da ci gaba da sabunta abubuwan tsaro kamar yadda halayen ƙira, tsammanin mai amfani, da buƙatun tsari ke tasowa.

Dabarun Tasiri

Yana inganta samun dama ta hanyar rubutu, ba da labari, da mu'amalar murya.

Yana inganta samun dama ta hanyar rubutu, ba da labari, da mu'amalar murya. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Ƙungiyoyin kafofin watsa labaru na iya jigilar sauti mai gogewa cikin sauri tare da ƙaramin kasafin kuɗi.

Ƙungiyoyin kafofin watsa labaru na iya jigilar sauti mai gogewa cikin sauri tare da ƙaramin kasafin kuɗi. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Tsarin fuskantar abokin ciniki na iya aiwatar da hulɗar magana a mafi girman ma'auni.

Tsarin fuskantar abokin ciniki na iya aiwatar da hulɗar magana a mafi girman ma'auni. A cikin ƙawance masu inganci, ana fassara wannan zuwa ƙa'idodin aiki waɗanda za a iya aunawa, iyakokin ikon mallaka, da kuma bita-da-kullin bita don ƙungiyoyi su iya haɓaka kwarin gwiwa a maimakon ɓata shakku.

Makomar Kayan Aikin Gane Maganar Kaldi

Tsarin HMM-DNN na Kaldi an maye gurbinsa da ƙirar jijiyoyi na ƙarshe zuwa ƙarshe waɗanda ke taswirar sauti kai tsaye zuwa rubutu. Aikin magaji na Daniel Povey, k2 (tare da yanayin yanayin Icefall da Lhotse), yana sake tunanin ra'ayoyin WFST na Kaldi a cikin PyTorch tare da rarrabuwa ta atomatik-jihar automata. Yi tsammanin Kaldi da kansa ya zama abin tuntuɓar tarihi da kayan aikin koyarwa, yayin da zuriyarsa ta ra'ayi ta haɗu da tsararren tsari na gargajiya tare da tsarin taswira na zamani da ƙirar sauti mai kulawa da kai.

Aiwatar da Gaskiyar Duniya

Dakunan gwaje-gwaje na ilimi suna sake haifar da Librispeech da ma'auni na Switchboard don inganta sabon binciken ƙirar ƙira.

Gina tsarin umarnin murya na al'ada don ƙananan albarkatu ko ƙananan harsuna ta amfani da girke-girke na Kaldi

Tilastawa mai jiwuwa zuwa rubuce-rubuce don ilimin harshe, ƙirƙirar saitin bayanai, da lokacin juzu'i

Ƙaddamar da binciken murya da wuri da ƙaƙƙarfan ƙaƙƙarfan baya a cikin masana'antu kafin ƙirar ƙarshe-zuwa-ƙarshen balaga

Hanyoyin Aiwatarwa

Kayan aikin Gane Magana Kaldi a aikace

Dakunan gwaje-gwaje na ilimi da ke sake haifar da Librispeech da ma'auni na Switchboard don inganta sabon binciken ƙirar ƙira.

Dakunan gwaje-gwaje na ilimi da ke sake haifar da Librispeech da Ma'auni na Switchboard don tabbatar da sabbin binciken ƙirar ƙirar ƙira Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ƙima masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in ƙira, da bin duk nasarorin samarwa da farashi na kuskure akan lokaci.

Kayan aikin Gane Magana Kaldi a aikace

Gina tsarin umarnin murya na al'ada don ƙananan albarkatu ko ƙananan harsuna ta amfani da girke-girke na Kaldi.

Gina tsarin umarnin murya na al'ada don ƙananan albarkatu ko ƙananan harsuna ta amfani da girke-girke na Kaldi Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ma'auni masu inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'i, da kuma bin duk nasarorin samarwa da farashi na kuskure akan lokaci.

Kayan aikin Gane Magana Kaldi a aikace

Tilasta jeri na sauti zuwa rubuce-rubuce don ilimin harshe, ƙirƙirar saitin bayanai, da lokacin juzu'i.

Tilasta jeri na audio zuwa rubuce-rubuce don ilimin harshe, ƙirƙira bayanan bayanai, da ƙwanƙwasa lokaci Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ƙofofin inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'i, da bin duk nasarorin samarwa da ƙimar kuskure akan lokaci.

Kayan aikin Gane Magana Kaldi a aikace

Ƙaddamar da binciken murya da wuri da ƙaƙƙarfan ƙaƙƙarfan baya a cikin masana'antu kafin ƙirar ƙarshe-zuwa-ƙarshen balaga.

Ƙarfafa binciken murya da wuri da ƙaƙƙarfan ƙaƙƙarfan baya a cikin masana'antu kafin ƙirar ƙarshe-zuwa-ƙarshen balagagge Ƙungiyoyi yawanci suna samun sakamako mafi kyau lokacin da suka ayyana ƙofofin inganci a gaba, kiyaye hanyar haɓakar ɗan adam don shari'o'in gefe, da bin duk nasarorin samarwa da farashi na kuskure akan lokaci.

Hatsari & Tsare-tsare

!

Rashin amfani da murya da haɗarin kwaikwaya yana ƙaruwa lokacin da aka rasa izini.

!

Daidaituwa na iya faɗuwa cikin lafuzza, yaruka, ko mahalli masu hayaniya.

!

Ana iya kuskuren sauti na roba don ingantacciyar magana ba tare da bayyananniyar lakabi ba.

Taswirar Hanya

1

Sami tabbataccen izini don ɗaukar murya, cloning, da sake amfani.

Sami tabbataccen izini don ɗaukar murya, cloning, da sake amfani. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

2

Gwajin ingantattun masu magana daban-daban da yanayin baya.

Gwajin ingantattun masu magana daban-daban da yanayin baya. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

3

Ƙayyade lokacin da dole ne ɗan adam ya duba ko ya amince da abubuwan da aka fitar.

Ƙayyade lokacin da dole ne ɗan adam ya duba ko ya amince da abubuwan da aka fitar. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

4

Yi lakabin sauti na roba da kuma adana bayanan da aka tabbatar don yin lissafi.

Yi lakabin sauti na roba da kuma adana bayanan da aka tabbatar don yin lissafi. Ɗauki kowane mataki azaman ƙofar shaida: idan ba a cika sharuɗɗa ba, dakatar da fitar, rufe tazarar, sannan kawai faɗaɗa amfani.

Ci gaba da Bincike