MWONGOZO WA AI wa Sauti

Demucs na Mgawanyo wa Chanzo cha Muziki wa HT-Demucs

Demus ni Meta modeli ya utenganisho ya chanzo-wazi cha chanzo cha muziki; Demuki za Kibadilishaji Mseto (HT-Demucs) hugawanya nyimbo katika sauti, ngoma, besi, na mashina mengine kwa kutumia muundo wa mawimbi na usindikaji wa spectrogram.

dk 2 kusomaIlisasishwa mwisho

Dive ya kina

Demucs (Kichujio Kina cha Vyanzo vya Muziki) hushughulikia tatizo la "kutochanganya" la kawaida: kurejesha nyimbo za ala kutoka kwa rekodi ya mwisho ya stereo. Matoleo ya awali yalitumia U-Net ya kikoa-ya wimbi ambayo ilifanya kazi moja kwa moja kwenye sampuli za sauti mbichi, ambazo zilihifadhi maelezo ya awamu ambayo mbinu za spectrogram mara nyingi hupoteza. Demuki Mseto zinazotumika sana na baadaye Demuki za Kibadilishaji Mseto (HT-Demucs) huchakata sauti katika muundo wa mawimbi na vikoa vya spectrogram kwa wakati mmoja, kisha kuziunganisha, na kuongeza umakini wa kibadilishaji cha kikoa katika muundo wa muundo wa masafa marefu. Imefunzwa kwenye mkusanyiko wa data wa MUSDB18 pamoja na data ya ziada, Demucs hutenganisha mseto katika mashina manne (sauti, ngoma, besi, nyingine) na imekuwa zana chaguomsingi kwa sababu ni chanzo huria, kinatumia GPU za watumiaji, na mara kwa mara hupata alama karibu na kilele cha utengano.

Ufahamu wa Kiufundi

Demu Mseto huendesha matawi mawili ya kisimbaji-simbuaji sambamba: moja kwenye muundo wa wimbi la kikoa cha saa na moja kwenye spectrogramu ya STFT. Vipengele vinabadilishwa kati ya matawi na kuunganishwa, kwa hiyo mfano hutumia awamu sahihi ya wimbi na muundo wa wazi wa mzunguko wa spectrogram. Ubora hupimwa kwa Uwiano wa Signal-to-Distortion (SDR) katika desibeli kwenye nyimbo zilizoshikiliwa. Kibadala cha kibadilishaji kijibadilisha huongeza umakini na umakini ili kunasa muktadha wa muziki kwa sekunde.

Athari za kimkakati

Kufikia na kufikia

Huboresha ufikiaji kupitia manukuu, simulizi na violesura vya sauti.

Cost and budget

Timu za media zinaweza kusafirisha sauti iliyoboreshwa haraka na bajeti ndogo.

Kasi na kiwango

Mifumo inayowakabili wateja inaweza kuchakata mwingiliano wa mazungumzo kwa kiwango kikubwa.

Mustakabali wa Demucs na Utenganisho wa Chanzo cha Muziki wa HT-Demucs

Utenganisho wa chanzo unaelekea kwenye mashina zaidi (kutenganisha gitaa za kibinafsi, piano, au hata waimbaji mahususi), utendakazi wa wakati halisi na wa kifaa, na utenganishaji wa haraka wa maandishi ("tenga saxophone"). Mifano bora itapunguza mabaki ya maji ambayo bado yanaonekana kwenye mchanganyiko mnene. Ubora unapoongezeka, tarajia muunganisho wa kina katika DAWs, programu za karaoke na remix, na zana za elimu ya muziki, pamoja na mjadala unaoendelea kuhusu hakimiliki na athari za idhini ya kutoa kwa njia safi sauti ya pekee ya msanii yeyote.

Utekelezaji wa Ulimwengu Halisi

Watayarishaji na viunga vinavyotoa acapella au ala safi kutoka kwa nyimbo zilizotolewa

Programu za karaoke zinaondoa sauti zinazoongoza kwa kuruka ili kuunda nyimbo zinazounga mkono

Wanamuziki wakitenga wimbo wa besi au ngoma ili kunakili au kufanya mazoezi pamoja nao

Marejesho ya sauti na sampuli za mtiririko wa kazi ambao unahitaji kuinua chombo kimoja kutoka kwa mchanganyiko wa zamani

Hatari & Walinzi

Hatari za matumizi mabaya ya sauti na uigaji huongezeka wakati kibali kinakosekana.

Usahihi unaweza kushuka katika lafudhi, lahaja au mazingira yenye kelele.

Sauti ya syntetisk inaweza kudhaniwa kimakosa kuwa usemi halisi bila kuweka lebo wazi.

Ramani ya Utekelezaji

1

Pata idhini ya moja kwa moja ya kunasa sauti, kuunda na kutumia tena.

2

Jaribu ubora kwenye spika na hali mbalimbali za usuli.

3

Bainisha wakati ni lazima binadamu akague au aidhinishe matokeo.

4

Weka lebo sauti ya sintetiki na uhifadhi rekodi za asili kwa uwajibikaji.

Endelea Kuchunguza

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Demucs and HT-Demucs Music Source Separation quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Anza chemsha bongo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Mwongozo unaofuata

Kutenganisha Muziki kwa Open-Unmix

Maswali yanayoulizwa mara kwa mara

What is Demucs and HT-Demucs Music Source Separation?

Demus ni Meta modeli ya utenganisho ya chanzo-wazi cha chanzo cha muziki; Demuki za Kibadilishaji Mseto (HT-Demucs) hugawanya nyimbo katika sauti, ngoma, besi, na mashina mengine kwa kutumia muundo wa mawimbi na usindikaji wa spectrogram.

Je, Demucs hufanya nini kwa wimbo uliokamilika?

Demus hutenganisha chanzo cha muziki, ikigawanya mchanganyiko wa stereo katika ala ya mtu binafsi na mashina ya sauti.

Ni nini hufanya Demu Mseto kuwa 'mseto'?

Demu Mseto huchanganya tawi la wimbi la kikoa cha wakati na tawi la spectrogram, ikichanganya nguvu zao.

Ni kipimo kipi kinatumika kwa kawaida kutathmini ubora wa utengano?

SDR, inayopimwa kwa desibeli, hubainisha jinsi shina linalokadiriwa linalingana na chanzo halisi.

Ni shirika gani lilitoa Demucs awali?

Demucs iliundwa na kutolewa kwa njia huria na watafiti katika Meta AI / FAIR.

Kwa nini Demucs za mapema zilifanya kazi moja kwa moja kwenye muundo mbichi wa wimbi?

Uendeshaji katika kikoa cha mawimbi huhifadhi awamu, ambayo mbinu za ukubwa wa spectrogram mara nyingi hutupwa na lazima zikadirie.