MWONGOZO WA AI wa Sauti
Takotini 2
Tacotron 2 ni mfumo wa kuanzia-mwisho-hadi-mwisho kutoka kwa Google (2017) ambao hubadilisha maandishi yaliyoandikwa moja kwa moja kuwa mel-spectrogram, ambayo vokoda ya neural huibadilisha kuwa usemi unaofanana na maisha.
Sikiliza mwongozo huuInaonyeshwa na AI · ~2 min
Katika ukurasa huudk 2 kusoma
Muhtasari
Ilitoa rekodi za sauti zinazopingana na wanadamu kwenye vigezo muhimu.
Dive ya kina
Tacotron 2 ina sehemu kuu mbili. Kwanza, mtandao wa mfuatano-kwa-mfuatano wenye umakini husoma herufi za maandishi na kutabiri fremu ya mel-spectrogram kwa fremu. Kisimbaji hugeuza herufi kuwa wasilisho fiche, utaratibu wa tahadhari unaozingatia eneo hupanga maandishi kwa fremu za sauti, na avkodare otomatiki hutoa spectrogramu huku 'tokeni ya kusitisha' hujifunza matamshi yanapoisha. Pili, vokoda iliyorekebishwa ya WaveNet inabadilisha spectrogramu hiyo ya mel kuwa muundo mbichi wa mawimbi. Kwa kugawanya tatizo kwa njia hii, Tacotron 2 hujifunza prosody, matamshi, na kasi kutoka kwa data na uhandisi wa mkono mdogo. Ilipata alama ya wastani ya maoni karibu na rekodi za kitaalamu, na kuifanya kuwa muhimu katika usanisi wa sauti asilia na kiolezo cha TTS ya neva ya baadaye.
Utekelezaji wa Ulimwengu Halisi
Kuwezesha sauti za asili katika bidhaa na visaidizi vya Google vya kutuma maandishi hadi usemi
Inazalisha masimulizi ya kueleweka kwa vitabu vya sauti na podikasti
Kutoa sauti kwa visoma skrini na programu ya ufikivu
Inatumika kama msingi wa utafiti na mfano wa kufundisha kwa mabomba ya neural TTS
Mustakabali wa Tacotron 2
Muundo wa hatua mbili wa Tacotron 2 ulichochea wimbi la TTS ya neva. Wafuasi wa haraka zaidi wasiotumia sauti kama FastSpeech 2 waliondoa avkodare mfuatano kwa kasi na uthabiti, na vokoda ya WaveNet sasa mara nyingi hubadilishwa kwa HiFi-GAN au miundo ya uenezi. Sehemu inaelekea kwenye mifumo ya uundaji wa sauti kutoka mwisho hadi mwisho na ya vipaza sauti vingi, inayoeleza, na isiyo na sifuri, lakini Tacotron 2 inasalia kuwa rejeleo la msingi la mabomba yanayotegemea spectrogram.
Kuiweka katika vitendo
Kwa nini ni muhimu
- Kufikia na kufikia. Huboresha ufikiaji kupitia manukuu, simulizi na violesura vya sauti.
- Gharama na bajeti. Timu za media zinaweza kusafirisha sauti iliyoboreshwa haraka na bajeti ndogo.
- Kasi na kiwango. Mifumo inayowakabili wateja inaweza kuchakata mwingiliano wa mazungumzo kwa kiwango kikubwa.
Jihadharini na
- Hatari za matumizi mabaya ya sauti na uigaji huongezeka wakati kibali kinakosekana.
- Usahihi unaweza kushuka katika lafudhi, lahaja au mazingira yenye kelele.
- Sauti ya syntetisk inaweza kudhaniwa kimakosa kuwa usemi halisi bila kuweka lebo wazi.
Hatua zinazofuata
- Pata idhini ya moja kwa moja ya kunasa sauti, kuunda na kutumia tena.
- Jaribu ubora kwenye spika na hali mbalimbali za usuli.
- Bainisha wakati ni lazima binadamu akague au aidhinishe matokeo.
- Weka lebo sauti ya sintetiki na uhifadhi rekodi za asili kwa uwajibikaji.
Endelea Kuchunguza
Jarida halali
Pata taarifa ya kila siku ya AI
Hadithi tatu za AI zilizothibitishwa kila asubuhi ya wiki, zimetengenezwa kwa Kiingereza rahisi. Bila malipo daima, hakuna matangazo.
Barua pepe moja kila siku ya wiki. Jiondoe kwa bonyeza moja. Hatutauza au kushiriki anwani yako.
Jijaribu mwenyewe
Take the Tacotron 2 quiz
Maoni ya haraka juu ya kila jibu, na cheti kinachoweza kushirikishwa na kitambulisho kinachoweza kuthibitishwa baada ya kupita kozi.
Changia elimu ya AI bila malipo. AI Understanding ni 501(c)(3) isiyo na faida — hakuna matangazo, hakuna kizuizi cha malipo, daima. Toa mchango
Maswali yanayoulizwa mara kwa mara
Tacotron 2 ni nini?
Tacotron 2 ni mfumo wa kuanzia-mwisho-hadi-mwisho kutoka kwa Google (2017) ambao hubadilisha maandishi yaliyoandikwa moja kwa moja kuwa mel-spectrogram, ambayo vokoda ya neural huibadilisha kuwa usemi unaofanana na maisha. Ilitoa rekodi za sauti zinazopingana na wanadamu kwenye vigezo muhimu.
Tacotron 2 inatabiri uwakilishi gani wa kati kutoka kwa maandishi?
Mtandao wa mfuatano wa Tacotron 2 unatabiri spectrogram ya mel, ambayo vokoda huigeuza kuwa sauti.
Ni nini kinachobadilisha spectrogram ya Tacotron 2 kuwa muundo halisi wa wimbi?
Tacotron 2 inaoanisha kitabiri chake cha spectrogram na vokoda iliyorekebishwa ya WaveNet ili kutoa sauti mbichi ya mwisho.
Je, umakini unaozingatia eneo husaidia kuzuia tatizo gani?
Kwa kuzingatia upangaji wa awali, umakini unaozingatia eneo hupunguza makosa kama vile maneno kurudiwa au kuachwa.
How does Tacotron 2 determine that it has generated the end of an utterance?
Tacotron 2 predicts a stop token alongside mel frames; generation ends when the learned stopping condition is met.
Ni mtindo gani wa usanifu wa jumla ambao sehemu ya maandishi-hadi-spectrogram hutumia?
Tacotron 2 hutumia muundo wa mfuatano wa kisimbaji-kwa-mfuatano kwa kuzingatia vibambo vya ramani kwa fremu za spectrogram.
Endelea kujifunza
Miongozo inayohusiana
Miongozo zaidi imechaguliwa kwa mada hii