MWONGOZO WA AI wa Sauti
Usanifu wa DeepSpeech
DeepSpeech ni kielelezo cha utambuzi wa usemi wa mwisho hadi mwisho ulioanzishwa na Baidu mnamo 2014 ambao hupanga vipengele vya sauti mbichi moja kwa moja kwenye maandishi kwa kutumia mtandao wa kawaida wa neva uliofunzwa na hasara ya CTC.
Sikiliza mwongozo huuInaonyeshwa na AI · ~2 min
Katika ukurasa huudk 2 kusoma
Muhtasari
It helped pioneer the shift away from complex, hand-engineered ASR pipelines toward learned, data-driven systems.
Dive ya kina
Vitambua matamshi vya kawaida viliunganishwa pamoja miundo tofauti ya akustika, kamusi za matamshi na miundo ya lugha iliyo na vipengee vilivyopangwa kwa mkono. DeepSpeech ilibadilisha sehemu kubwa ya hiyo na mtandao mmoja wa neva uliofunzwa mwisho hadi mwisho. Usanifu wake huchukua vipengele vya spectrogram au MFCC juu ya fremu fupi za sauti na kuzilisha kupitia safu kadhaa zilizounganishwa kikamilifu, safu inayorudiwa ya pande mbili ambayo inanasa muktadha kutoka zamani na siku zijazo, na safu ya matokeo inayozalisha uwezekano wa usambazaji juu ya wahusika katika kila hatua ya wakati. Muhimu sana, hutumia Uainishaji wa Muda wa Muunganisho (CTC), ambao huruhusu mtandao kujifunza upatanishi kati ya sauti na maandishi bila kuhitaji lebo za kiwango cha fremu. Mozilla baadaye ilitoa utekelezaji maarufu wa chanzo-wazi (pamoja na matoleo mapya zaidi kwa kutumia muundo unaotegemea LSTM, unaoweza kutiririka), na kufanya mbinu hiyo kufikiwa kwa wingi.
Utekelezaji wa Ulimwengu Halisi
Nje ya mtandao, utambuzi wa amri ya sauti kwenye kifaa kwa programu zinazolenga faragha kwa kutumia DeepSpeech iliyo wazi ya Mozilla.
Inazalisha nakala za rasimu za podikasti au mihadhara bila kutegemea huduma ya wingu
Kufundisha misingi ya upotezaji wa mwisho hadi mwisho wa ASR na CTC katika kozi za kujifunza mashine za chuo kikuu.
Kuunda violesura maalum vya sauti vya IoT au vifaa vilivyopachikwa ambapo kitambua chepesi na kinachoweza kutiririka kinahitajika
Mustakabali wa Usanifu wa DeepSpeech
DeepSpeech yenyewe imebadilishwa kwa kiasi kikubwa na usanifu wa umakini na kibadilishaji (Conformer, Whisper, wav2vec 2.0) ambao unanasa muktadha mrefu na kujisimamia kwa sauti isiyo na lebo. Lakini mawazo yake ya msingi, mafunzo ya mwisho hadi mwisho na usimbaji wa CTC, yanasalia kuwa ya msingi na bado yanaonekana ndani ya mifumo ya kisasa ya mseto. Urithi huo ni wa kimawazo: ulithibitisha kuwa modeli moja iliyofunzwa inaweza kushindana na mabomba yaliyosanifiwa sana, na hivyo kufungua njia kwa miundo ya leo mikubwa, ya lugha nyingi na inayojidhibiti ya msingi ya usemi.
Kuiweka katika vitendo
Kwa nini ni muhimu
- Kufikia na kufikia. Huboresha ufikiaji kupitia manukuu, simulizi na violesura vya sauti.
- Gharama na bajeti. Timu za media zinaweza kusafirisha sauti iliyoboreshwa haraka na bajeti ndogo.
- Kasi na kiwango. Mifumo inayowakabili wateja inaweza kuchakata mwingiliano wa mazungumzo kwa kiwango kikubwa.
Jihadharini na
- Hatari za matumizi mabaya ya sauti na uigaji huongezeka wakati kibali kinakosekana.
- Usahihi unaweza kushuka katika lafudhi, lahaja au mazingira yenye kelele.
- Sauti ya syntetisk inaweza kudhaniwa kimakosa kuwa usemi halisi bila kuweka lebo wazi.
Hatua zinazofuata
- Pata idhini ya moja kwa moja ya kunasa sauti, kuunda na kutumia tena.
- Jaribu ubora kwenye spika na hali mbalimbali za usuli.
- Bainisha wakati ni lazima binadamu akague au aidhinishe matokeo.
- Weka lebo sauti ya sintetiki na uhifadhi rekodi za asili kwa uwajibikaji.
Endelea Kuchunguza
Jarida halali
Pata taarifa ya kila siku ya AI
Hadithi tatu za AI zilizothibitishwa kila asubuhi ya wiki, zimetengenezwa kwa Kiingereza rahisi. Bila malipo daima, hakuna matangazo.
Barua pepe moja kila siku ya wiki. Jiondoe kwa bonyeza moja. Hatutauza au kushiriki anwani yako.
Jijaribu mwenyewe
Take the DeepSpeech Architecture quiz
Maoni ya haraka juu ya kila jibu, na cheti kinachoweza kushirikishwa na kitambulisho kinachoweza kuthibitishwa baada ya kupita kozi.
Changia elimu ya AI bila malipo. AI Understanding ni 501(c)(3) isiyo na faida — hakuna matangazo, hakuna kizuizi cha malipo, daima. Toa mchango
Maswali yanayoulizwa mara kwa mara
What is DeepSpeech Architecture?
DeepSpeech ni kielelezo cha utambuzi wa usemi wa mwisho hadi mwisho ulioanzishwa na Baidu mnamo 2014 ambao hupanga vipengele vya sauti mbichi moja kwa moja kwenye maandishi kwa kutumia mtandao wa kawaida wa neva uliofunzwa na hasara ya CTC. Ilisaidia uanzishaji wa kuhama kutoka kwa mabomba changamano, yaliyoundwa kwa mkono na ASR kuelekea mifumo iliyojifunza, inayoendeshwa na data.
Ni utendakazi gani wa upotezaji unaoruhusu DeepSpeech kutoa mafunzo bila usawazishaji wa kiwango cha fremu kati ya sauti na maandishi?
CTC huleta ishara tupu na kujumlisha upangaji wote halali unaoporomoka hadi kwenye maandishi lengwa, hivyo basi kuondoa hitaji la lebo za kila fremu.
Ni falsafa gani kuu ya usanifu ambayo DeepSpeech ilieneza umaarufu?
DeepSpeech ilibadilisha bomba la jadi la hatua nyingi na mtandao mmoja wa neva uliofunzwa mwisho hadi mwisho, mabadiliko makubwa katika muundo wa ASR.
Kwa nini DeepSpeech hutumia safu inayorudiwa ya pande mbili?
RNN ya pande mbili huchakata mfuatano katika pande zote mbili, kwa hivyo kila towe hunufaika kutokana na muktadha wa akustisk unaozunguka, kuboresha usahihi.
Je, DeepSpeech hufanya kazi kwa aina gani ya vipengele vya ingizo?
Muundo huu hutumia vipengele vya sauti vya kiwango cha fremu kama vile spectrogramu au MFCC na uwezekano wa matokeo wa herufi kwa kila hatua ya saa.
Ni nini mara nyingi huongezwa wakati wa kusimbua ili kuboresha chaguo la maneno na tahajia ya DeepSpeech?
Kuchanganya sauti ya sauti na muundo wa lugha ya nje wakati wa kusimbua husaidia mfumo kutoa maneno na tahajia zinazokubalika zaidi.
Endelea kujifunza
Miongozo inayohusiana
Miongozo zaidi imechaguliwa kwa mada hii