MWONGOZO WA AI wa Sauti

Mgawanyiko wa Shina la Spleeter

Spleeter ni zana huria kutoka kwa Deezer ambayo inagawanya wimbo uliokamilika kuwa nyimbo tofauti (sauti, ngoma, besi, na zaidi) kwa kutumia mafunzo ya kina.

Muhtasari

Spleeter ni zana huria kutoka kwa Deezer ambayo inagawanya wimbo uliokamilika kuwa nyimbo tofauti (sauti, ngoma, besi, na zaidi) kwa kutumia mafunzo ya kina. Ilifanya utenganishaji wa shina wa hali ya juu haraka, bila malipo, na ufikiwe na mtu yeyote aliye na kompyuta ndogo.

Mgawanyiko wa Shina la Spleeter hukaa katika mtiririko wa sauti-AI ambao hubadilisha usemi, muziki na sauti kwa mawasiliano, ufikiaji, na utengenezaji wa media.

Dive ya kina

Spleeter, iliyotolewa na kampuni ya utiririshaji muziki ya Deezer mnamo 2019, inatenganisha rekodi iliyochanganywa katika mashina ya ala binafsi. Inasafirishwa katika usanidi tatu zilizofunzwa awali: 2-shina (sauti pamoja na kusindikiza), 4-shina (sauti, ngoma, besi, nyingine), na shina-5 (ambayo inaongeza piano). Chini ya kofia hutumia mitandao ya neva ya U-Net inayofanya kazi kwenye spectrogramu ya sauti, kutabiri barakoa laini kwa kila chanzo. Kuzidisha kinyago kwa spectrogramu asili na kugeuza nyuma hadi kwenye sauti hutoa mavuno ya kila shina. Kilichofanya Spleeter kujulikana ni kasi: inaweza kutenganisha sauti takriban mara 100 haraka kuliko wakati halisi kwenye GPU. Inatumiwa sana na DJs, viigizaji upya, wanakili, na waundaji wa karaoke, na ilizua wimbi la vitenganishi shindani kama vile Demucs.

Ufahamu wa Kiufundi

Spleeter hufanya kazi katika kikoa cha masafa ya saa. Sauti inabadilishwa kuwa spectrogramu ya ukubwa kupitia Ubadilishaji wa Muda Mfupi wa Fourier (STFT). U-Net (kisimbaji-kisimbaji chenye miunganisho ya kuruka) hujifunza, kwa kila chanzo, barakoa kati ya 0 na 1 kwa kila pipa la masafa ya saa. Sspectrogramu iliyofunikwa inaunganishwa tena na awamu ya mchanganyiko asilia, kisha STFT inverse inaunda upya muundo wa wimbi. Kwa sababu inakadiria vinyago laini badala ya sauti mbichi, kuvuja na kutumika tena husababisha vizalia vya programu.

Kujua Utengano wa Shina la Spleeter

Spleeter ni zana huria kutoka kwa Deezer ambayo inagawanya wimbo uliokamilika kuwa nyimbo tofauti (sauti, ngoma, besi, na zaidi) kwa kutumia mafunzo ya kina. Ilifanya utenganishaji wa shina wa hali ya juu haraka, bila malipo, na ufikiwe na mtu yeyote aliye na kompyuta ndogo. Mgawanyiko wa Shina la Spleeter hukaa katika mtiririko wa sauti-AI ambao hubadilisha usemi, muziki na sauti kwa mawasiliano, ufikiaji, na utengenezaji wa media. Ili kujenga uelewa wa kina, chukulia Utenganisho wa Spleeter Stem kama kielelezo cha uendeshaji, si kipengele kimoja: fafanua matokeo unayotaka, fafanua mawazo, na utenganishe kile ambacho mfumo unaweza kufanya kwa uhakika na kile ambacho bado kinahitaji uamuzi wa kitaalamu.

Kwa mazoezi, timu dhabiti zinazotumia Utenganishaji wa Shina la Spleeter huchukulia ubora, muda wa kusubiri, na idhini kama sehemu muhimu sawa za mkakati wa kusambaza. Huandika vigezo dhahiri vya kufaulu, kujaribu dhidi ya data halisi na mtiririko wa kazi, na kurudia kulingana na mifumo ya kushindwa iliyoonekana badala ya ushindi wa mara moja wa benchmark. Hapa ndipo uelewa wa kinadharia unapogeuka kuwa uwezo wa kudumu katika bidhaa, sera na uendeshaji.

Huboresha ufikiaji kupitia manukuu, simulizi na violesura vya sauti. Wakati huo huo, matumizi mabaya ya Sauti na hatari za uigaji huongezeka wakati kibali kinakosekana. Mbinu thabiti zaidi ni kuchanganya kasi ya majaribio na nidhamu ya utawala: kuendesha majaribio, kunasa ushahidi, kuchapisha kumbukumbu za maamuzi, na kuendelea kusasisha ulinzi huku tabia ya kielelezo, matarajio ya watumiaji na mahitaji ya udhibiti yanapobadilika.

Athari za kimkakati

Huboresha ufikiaji kupitia manukuu, simulizi na violesura vya sauti.

Huboresha ufikiaji kupitia manukuu, simulizi na violesura vya sauti. Katika utumaji wa ubora wa juu, hii inatafsiriwa katika sheria zinazoweza kupimika za uendeshaji, mipaka ya umiliki, na desturi za ukaguzi wa mara kwa mara ili timu ziweze kuongeza imani badala ya kuongeza utata.

Timu za media zinaweza kusafirisha sauti iliyoboreshwa haraka na bajeti ndogo.

Timu za media zinaweza kusafirisha sauti iliyoboreshwa haraka na bajeti ndogo. Katika utumaji wa ubora wa juu, hii inatafsiriwa katika sheria zinazoweza kupimika za uendeshaji, mipaka ya umiliki, na desturi za ukaguzi wa mara kwa mara ili timu ziweze kuongeza imani badala ya kuongeza utata.

Mifumo inayowakabili wateja inaweza kuchakata mwingiliano wa mazungumzo kwa kiwango kikubwa.

Mifumo inayowakabili wateja inaweza kuchakata mwingiliano wa mazungumzo kwa kiwango kikubwa. Katika utumaji wa ubora wa juu, hii inatafsiriwa katika sheria zinazoweza kupimika za uendeshaji, mipaka ya umiliki, na desturi za ukaguzi wa mara kwa mara ili timu ziweze kuongeza imani badala ya kuongeza utata.

Mustakabali wa Kutengana kwa Shina la Spleeter

Miundo mipya ya kikoa cha mawimbi kama vile Demucs na vitenganishi vya kibadilishaji kibadilishaji mseto sasa vinaishinda Spleeter kwa ubora, kurejesha mabadiliko ya muda mfupi na vizalia vya programu vichache. Mwenendo unaelekea kwenye idadi kubwa ya mashina (kutenganisha gitaa binafsi au sauti zinazounga mkono), utenganishaji wa wakati halisi kwenye kifaa katika DAWs na simu, na kuunganishwa katika programu za kutiririsha kwa uchanganyaji wa papo hapo au ufikivu. Spleeter yenyewe inasalia kuwa msingi maarufu kwa sababu ni nyepesi, haina malipo, na ni rahisi kuendesha, hata kama utafiti unavyosukuma mbinu za ufahamu wa awamu na za uzalishaji.

Utekelezaji wa Ulimwengu Halisi

Kuunda nyimbo za papo hapo za karaoke kwa kuondoa sauti kuu kutoka kwa wimbo wa kibiashara

Ma-DJ na watayarishaji wakitenga ngoma au shina la besi ili kuunda miziki na mashup

Wanafunzi wa muziki wakichomoa mstari mmoja wa ala ili kunakili na kufanya mazoezi pamoja nao

Kurejesha au kusafisha rekodi za zamani kwa kutenganisha na kusawazisha tena michanganyiko ya matope

Miundo ya Utekelezaji

Mgawanyiko wa Shina la Spleeter katika mazoezi

Kuunda nyimbo za papo hapo za karaoke kwa kuondoa sauti kuu kutoka kwa wimbo wa kibiashara.

Kuunda nyimbo za papo hapo za karaoke kwa kuondoa sauti kuu kutoka kwa wimbo wa kibiashara Timu kwa kawaida hupata matokeo bora zaidi zinapofafanua viwango vya ubora mbele, kuweka njia ya kupanda kwa binadamu kwa matukio makali, na kufuatilia faida za tija na gharama za makosa kwa wakati.

Mgawanyiko wa Shina la Spleeter katika mazoezi

Ma-DJ na watayarishaji wakitenga ngoma au shina la besi ili kuunda mchanganyiko na mashup.

Ma-DJ na watayarishaji wakitenga ngoma au shina la besi ili kuunda mchanganyiko na uchanganyaji Timu kwa kawaida hupata matokeo bora zaidi zinapofafanua viwango vya ubora mbele, kuweka njia ya kupanda kwa binadamu kwa matukio makali, na kufuatilia faida za tija na gharama za makosa kwa wakati.

Mgawanyiko wa Shina la Spleeter katika mazoezi

Wanafunzi wa muziki wakichomoa mstari mmoja wa ala ili kunakili na kufanya mazoezi pamoja nao.

Wanafunzi wa muziki wakichomoa mstari wa ala moja ili kunakili na kufanya mazoezi pamoja na Timu kwa kawaida hupata matokeo bora zaidi wanapofafanua viwango vya ubora wa juu, kuweka njia ya kupanda kwa binadamu kwa matukio makali, na kufuatilia faida za tija na gharama za makosa kwa wakati.

Mgawanyiko wa Shina la Spleeter katika mazoezi

Kurejesha au kusafisha rekodi za zamani kwa kutenganisha na kusawazisha tena michanganyiko ya matope.

Kurejesha au kusafisha rekodi za zamani kwa kutenganisha na kusawazisha tena michanganyiko ya matope Timu kwa kawaida hupata matokeo bora zaidi zinapofafanua viwango vya ubora mbele, kuweka njia ya kupanda kwa binadamu kwa matukio makali, na kufuatilia faida za tija na gharama za makosa kwa wakati.

Hatari & Walinzi

!

Hatari za matumizi mabaya ya sauti na uigaji huongezeka wakati kibali kinakosekana.

!

Usahihi unaweza kushuka katika lafudhi, lahaja au mazingira yenye kelele.

!

Sauti ya syntetisk inaweza kudhaniwa kimakosa kuwa usemi halisi bila kuweka lebo wazi.

Ramani ya Utekelezaji

1

Pata idhini ya moja kwa moja ya kunasa sauti, kuunda na kutumia tena.

Pata idhini ya moja kwa moja ya kunasa sauti, kuunda na kutumia tena. Chukulia kila hatua kama lango la ushahidi: ikiwa vigezo havitatimizwa, sitisha uchapishaji, funga pengo, kisha upanue matumizi.

2

Jaribu ubora kwenye spika na hali mbalimbali za usuli.

Jaribu ubora kwenye spika na hali mbalimbali za usuli. Chukulia kila hatua kama lango la ushahidi: ikiwa vigezo havitatimizwa, sitisha uchapishaji, funga pengo, kisha upanue matumizi.

3

Bainisha wakati ni lazima binadamu akague au aidhinishe matokeo.

Bainisha wakati ni lazima binadamu akague au aidhinishe matokeo. Chukulia kila hatua kama lango la ushahidi: ikiwa vigezo havitatimizwa, sitisha uchapishaji, funga pengo, kisha upanue matumizi.

4

Weka lebo sauti ya sintetiki na uhifadhi rekodi za asili kwa uwajibikaji.

Weka lebo sauti ya sintetiki na uhifadhi rekodi za asili kwa uwajibikaji. Chukulia kila hatua kama lango la ushahidi: ikiwa vigezo havitatimizwa, sitisha uchapishaji, funga pengo, kisha upanue matumizi.

Endelea Kuchunguza