DalšíDalší průvodce
Automatické označování hudby
Zvuková AI
Zvukový průvodce AI
Music Information Retrieval (MIR) je obor, který učí počítače analyzovat, rozumět a vyhledávat hudbu ze zvukových signálů a partitur.
Poslechněte si tento návodAI-vyprávěný · ~2 min
Pohání vše od identifikace skladeb ve stylu Shazam až po doporučení Spotify a automatické označování hudby.
Music Information Retrieval leží na průsečíku zpracování signálu, strojového učení a hudební vědy. Výzkumníci extrahují vlastnosti ze zvuku, jako je spektrogram, mel-frekvenční kepstrální koeficienty (MFCC), chroma vektory a tempo, aby zachytili výšku, zabarvení, rytmus a harmonii. Systémy MIR z nich provádějí úkoly, jako je sledování rytmu, detekce kláves, klasifikace žánru, extrakce melodie, identifikace převzaté skladby a doporučení hudby. Výroční konference ISMIR a hodnotící kampaň MIREX jsou hnacím motorem pokroku od roku 2000. Moderní MIR stále více využívá hluboké učení, trénování konvolučních a transformátorových sítí přímo na spektrogramech a vkládání zvuku s vlastním dohledem, které nahrazuje mnoho ručně vytvořených funkcí, přičemž se stále spoléhá na koncepty hudební teorie k označování a interpretaci výsledků.
Shazam a podobné aplikace identifikující skladbu z hlučné nahrávky telefonu pomocí zvukových otisků prstů
Spotify a Apple Music generují doporučení a automatické seznamy skladeb na základě naučené podobnosti zvuku
Automatické označování nálady, žánru a nástrojů pro obrovské produkční hudební a skladové audio knihovny
Detekce převzatých verzí a potenciálních shod autorských práv na platformách, jako je YouTube Content ID
MIR se posouvá směrem k velkým audio modelům s vlastním dohledem, které se učí obecné hudební reprezentace z milionů neoznačených stop a poté dolaďují konkrétní úkoly s malým množstvím označených dat. Očekávejte těsnější integraci s generativními hudebními modely, vyhledávání hudby v přirozeném jazyce („najděte vzrušující jazzovou skladbu pomocí štětců“) a lepší zacházení s nezápadními tradicemi, které standardní modely barev a klíčů zanedbávají. Multimodální systémy kombinující zvuk, texty, partitury a metadata učiní doporučení a objevování mnohem nuancí a přizpůsobení.
Newsletter zdarma
Tři ověřené příběhy ze světa AI každý všední den ráno, psané srozumitelnou angličtinou. Navždy zdarma, bez reklam.
Jeden e-mail každý všední den. Odhlásit se můžete jedním kliknutím. Vaši adresu nikdy neprodáváme ani nesdílíme.
Otestujte se
Okamžitá zpětná vazba ke každé odpovědi a sdílitelný certifikát s ověřitelným ID po absolvování kurzu.
Podpořte bezplatnou AI vzdělávání. AI Understanding je nezisková organizace 501(c)(3) — žádné reklamy, žádná platba za přístup, nikdy. Darujte
Music Information Retrieval (MIR) je obor, který učí počítače analyzovat, rozumět a vyhledávat hudbu ze zvukových signálů a partitur. Pohání vše od identifikace skladeb ve stylu Shazam až po doporučení Spotify a automatické označování hudby.
Chroma nabízí skládání energie ze všech oktáv do 12 tříd výšky tónu, díky čemuž jsou vhodné pro analýzu harmonie, akordů a tóniny.
Krátkodobá Fourierova transformace vytváří spektrogram, základ pro většinu funkcí a modelů MIR.
Fingerprinting vytváří kompaktní, šumově odolné hashe zvukových špiček, které jsou porovnávány s indexovanou databází.
Ústředním místem tohoto oboru je ISMIR, konference International Society for Music Information Retrieval.
Samokontrolované učení extrahuje obecnou hudební strukturu z neoznačeného zvuku, což snižuje potřebu nákladných ručně označovaných datových sad.
Učte se dál
Pro toto téma bylo vybráno více průvodců
DalšíDalší průvodce
Automatické označování hudby
Zvuková AI