MWONGOZO WA AI wa Sauti
Mafunzo ya Kubadilika kwa Ruhusa
Mafunzo ya kutobadilika kwa vibali (PIT) ni mbinu ya ujanja ya mafunzo ambayo huruhusu kielelezo kutenganisha sauti nyingi bila kujali ni nafasi gani ya kila sauti hutua.
Sikiliza mwongozo huuInaonyeshwa na AI · ~2 min
Katika ukurasa huudk 2 kusoma
Muhtasari
Ilitatua tatizo la ukaidi la kuweka lebo ambalo lilikuwa limezuia maendeleo katika utenganisho wa usemi.
Dive ya kina
Mtandao unapotoa sauti mbili zilizotenganishwa, hakuna kanuni asilia ambayo pato linapaswa kuwa 'msemaji 1' dhidi ya 'mzungumzaji 2'. Ikiwa mafunzo kila wakati yanatarajia spika A katika pato la 1, lakini modeli inaweka A katika matokeo 2, inaadhibiwa ingawa utengano ulikuwa kamili. 'Tatizo hili la kuruhusu lebo' lilisababisha miundo kutoa ukungu, matokeo ya wastani. Ilianzishwa na Dong Yu na wenzake mwaka wa 2017, PIT huirekebisha kwa kujaribu kila uoanishaji unaowezekana kati ya matokeo ya modeli na vyanzo vya kweli, kukokotoa makosa kwa kila moja, na kuweka tu mgawo wa makosa ya chini zaidi kusasisha muundo. Kwa hivyo mtandao hutuzwa kwa utengano safi bila kujali kuagiza, na kufanya mafunzo thabiti ya wasemaji wengi hatimaye kufanya kazi.
Utekelezaji wa Ulimwengu Halisi
Kufunza mitandao ya neva ili kutenganisha spika mbili au zaidi zinazopishana katika rekodi za mkutano na simu.
Kuwasha mifumo ya kutenganisha maikrofoni moja inayotumika kama sehemu ya mbele ya utambuzi wa usemi.
Kuwezesha PIT ya kiwango cha kutamka ili kuweka kila spika iliyogawiwa kwa njia thabiti ya kutoa sauti katika mazungumzo yote.
Inatumika kama lengo la mafunzo katika miundo ya utenganisho wa alama iliyotathminiwa kwenye hifadhidata kama WSJ0-2mix.
Mustakabali wa Mafunzo ya Kubadilika kwa Ruhusa
PIT inasalia kuwa uti wa mgongo wa utafiti wa kutenganisha, lakini maelekezo mapya zaidi yanapunguza gharama yake ya ujumuishaji na utata wa kuagiza. Mbinu kama vile utenganisho unaojirudia huchota spika moja kwa wakati mmoja, na mbinu za mzungumzaji lengwa huepuka kabisa uruhusuji kwa kuweka kiashiria cha sauti. Mipangilio ya ugawaji inayotegemea girafu na grafu inalenga kuongeza PIT hadi hesabu kubwa, zinazobadilika za spika. Tarajia mawazo ya mtindo wa PIT yaendelee popote ambapo mtindo lazima utoe seti ya matokeo ambayo hayajapangwa, hata zaidi ya sauti.
Kuiweka katika vitendo
Kwa nini ni muhimu
- Kufikia na kufikia. Huboresha ufikiaji kupitia manukuu, simulizi na violesura vya sauti.
- Gharama na bajeti. Timu za media zinaweza kusafirisha sauti iliyoboreshwa haraka na bajeti ndogo.
- Kasi na kiwango. Mifumo inayowakabili wateja inaweza kuchakata mwingiliano wa mazungumzo kwa kiwango kikubwa.
Jihadharini na
- Hatari za matumizi mabaya ya sauti na uigaji huongezeka wakati kibali kinakosekana.
- Usahihi unaweza kushuka katika lafudhi, lahaja au mazingira yenye kelele.
- Sauti ya syntetisk inaweza kudhaniwa kimakosa kuwa usemi halisi bila kuweka lebo wazi.
Hatua zinazofuata
- Pata idhini ya moja kwa moja ya kunasa sauti, kuunda na kutumia tena.
- Jaribu ubora kwenye spika na hali mbalimbali za usuli.
- Bainisha wakati ni lazima binadamu akague au aidhinishe matokeo.
- Weka lebo sauti ya sintetiki na uhifadhi rekodi za asili kwa uwajibikaji.
Endelea Kuchunguza
Jarida halali
Pata taarifa ya kila siku ya AI
Hadithi tatu za AI zilizothibitishwa kila asubuhi ya wiki, zimetengenezwa kwa Kiingereza rahisi. Bila malipo daima, hakuna matangazo.
Barua pepe moja kila siku ya wiki. Jiondoe kwa bonyeza moja. Hatutauza au kushiriki anwani yako.
Jijaribu mwenyewe
Take the Permutation Invariant Training quiz
Maoni ya haraka juu ya kila jibu, na cheti kinachoweza kushirikishwa na kitambulisho kinachoweza kuthibitishwa baada ya kupita kozi.
Changia elimu ya AI bila malipo. AI Understanding ni 501(c)(3) isiyo na faida — hakuna matangazo, hakuna kizuizi cha malipo, daima. Toa mchango
Maswali yanayoulizwa mara kwa mara
Mafunzo ya Kutobadilika kwa Ruhusa ni nini?
Mafunzo ya kutobadilika kwa vibali (PIT) ni mbinu ya ujanja ya mafunzo ambayo huruhusu kielelezo kutenganisha sauti nyingi bila kujali ni sehemu gani ya kila sauti huingia. Ilisuluhisha tatizo la uwekaji lebo ambalo lilikuwa limezuia maendeleo katika utenganishaji wa usemi.
Ni tatizo gani la msingi ambalo mafunzo ya kubadilika kwa vibali (PIT) hutatua?
PIT inashughulikia shida ya vibali vya lebo: hakuna sababu ya asili pato 1 inapaswa kuwa spika A badala ya spika B.
PIT huamua vipi kosa la kutumia wakati wa kusasisha modeli?
PIT hutathmini upotevu kwa kila ruhusa inayowezekana na kueneza mgawo wa hasara ya chini pekee.
Bila suluhisho kama PIT, ni nini kilielekea kutokea kwa matokeo ya mfano wa kujitenga?
Uwekaji lebo usiolingana ulituma viwango vya juu vinavyokinzana, na kusukuma muundo kuelekea makadirio ya wastani, yaliyopakwa ya spika.
Kwa kutenganisha spika N, ni vibali vingapi lazima PIT izingatie kwa kila hatua?
Wapo N! njia za kupeana matokeo ya N kwa vyanzo vya N, ndiyo sababu kuongeza PIT kwa spika nyingi kunakuwa ghali.
Je! ni faida gani ya PIT ya kiwango cha kutamka (uPIT) inaongeza juu ya mgawo wa kiwango cha fremu?
uPIT hurekebisha kibali kimoja cha matamshi yote, na kuzuia spika kubadilishana chaneli katikati ya sentensi.
Endelea kujifunza
Miongozo inayohusiana
Miongozo zaidi imechaguliwa kwa mada hii