Audio AI-GIDS

Spleeter-stamscheiding

Spleeter is een open-sourcetool van Deezer die een voltooid nummer opsplitst in afzonderlijke tracks (zang, drums, bas en meer) met behulp van deep learning.

2 min readLaatst bijgewerkt

Overzicht

It made high-quality stem separation fast, free, and accessible to anyone with a laptop.

Diepe duik

Spleeter, uitgebracht door muziekstreamingbedrijf Deezer in 2019, verdeelt een gemengde opname in individuele instrumentstelen. Het wordt geleverd in drie vooraf getrainde configuraties: 2-stemmig (zang plus begeleiding), 4-stemmig (zang, drums, bas, andere) en 5-stemmig (die piano toevoegt). Onder de motorkap maakt het gebruik van U-Net convolutionele neurale netwerken die werken op het audiospectrogram en voor elke bron een zacht masker voorspellen. Door het masker te vermenigvuldigen met het originele spectrogram en terug te keren naar audio, wordt elke stam verkregen. Wat Spleeter beroemd maakte, was snelheid: het kan audio ongeveer 100 keer sneller scheiden dan realtime op een GPU. Het wordt veel gebruikt door dj's, remixers, transcribenten en karaokemakers, en het leidde tot een golf van concurrerende afscheiders zoals Demucs.

Technisch inzicht

Spleeter werkt in het tijd-frequentiedomein. Audio wordt via Short-Time Fourier Transform (STFT) omgezet naar een magnitudespectrogram. Een U-Net (encoder-decoder met skip-verbindingen) leert per bron een masker tussen 0 en 1 voor elke tijdfrequentiebak. Het gemaskeerde spectrogram wordt opnieuw gecombineerd met de fase van het oorspronkelijke mengsel, waarna een inverse STFT de golfvorm reconstrueert. Omdat het zachte maskers schat in plaats van ruwe audio, veroorzaken lekkage en hergebruikte fase artefacten.

Strategische impact

Access and reach

Het verbetert de toegankelijkheid via transcriptie, gesproken tekst en spraakinterfaces.

Cost and budget

Mediateams kunnen met kleinere budgetten sneller gepolijste audio leveren.

Speed and scale

Klantgerichte systemen kunnen gesproken interacties op grotere schaal verwerken.

De toekomst van Spleeter-stamscheiding

Nieuwere golfvormdomeinmodellen zoals Demucs en hybride transformatorscheiders verslaan nu Spleeter op het gebied van kwaliteit, waardoor scherpere transiënten en minder artefacten worden hersteld. De trend gaat richting hogere stemtellingen (het scheiden van individuele gitaren of achtergrondzang), realtime scheiding op het apparaat in DAW's en telefoons, en integratie in streaming-apps voor onmiddellijke remixing of toegankelijkheid. Spleeter zelf blijft een populaire basislijn omdat het lichtgewicht, gratis en gemakkelijk te gebruiken is, zelfs nu onderzoek fasebewuste en generatieve benaderingen stimuleert.

Implementatie in de echte wereld

Creëer instant karaoke-tracks door de leadzang uit een commercieel nummer te verwijderen

DJ's en producers die een drum- of basstam isoleren om remixen en mashups te maken

Muziekstudenten die een enkele instrumentregel uitkiezen om te transcriberen en mee te oefenen

Oude opnames herstellen of opschonen door modderige mixen te scheiden en opnieuw in balans te brengen

Risico's en vangrails

Het risico op stemmisbruik en imitatie neemt toe als de toestemming ontbreekt.

De nauwkeurigheid kan afnemen bij accenten, dialecten of luidruchtige omgevingen.

Synthetische audio kan worden aangezien voor authentieke spraak zonder duidelijke labels.

Implementatie routekaart

1

Verkrijg expliciete toestemming voor het vastleggen, klonen en hergebruiken van spraak.

2

Test de kwaliteit van diverse sprekers en achtergrondomstandigheden.

3

Bepaal wanneer een mens de output moet beoordelen of goedkeuren.

4

Label synthetische audio en houd de herkomstgegevens bij voor verantwoording.

Blijf verkennen

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Spleeter Stem Separation quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Start quiz

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Next guide

Conv-TasNet tijd-domeinscheiding

Frequently asked questions

What is Spleeter Stem Separation?

Spleeter is een open-sourcetool van Deezer die een voltooid nummer opsplitst in afzonderlijke tracks (zang, drums, bas en meer) met behulp van deep learning. Het maakte hoogwaardige stengelscheiding snel, gratis en toegankelijk voor iedereen met een laptop.

Welk bedrijf heeft Spleeter oorspronkelijk uitgebracht?

Spleeter werd in 2019 als open source uitgebracht door Deezer, het Franse muziekstreamingbedrijf.

Waarin wordt het vierstemmig model van Spleeter gescheiden?

De configuratie met 4 stengels levert zang, drums, bas en een 'andere' stem voor al het andere.

Welke neurale netwerkarchitectuur gebruikt Spleeter?

Spleeter maakt gebruik van U-Net convolutionele netwerken die maskers op het audiospectrogram voorspellen.

Hoe haalt Spleeter eigenlijk één enkele bron uit de mix?

Het netwerk voorspelt een masker per bron (waarden 0 tot 1) dat wordt vermenigvuldigd met het mengselspectrogram.

Wat is een belangrijk praktisch voordeel dat Spleeter populair heeft gemaakt?

Spleeter kan audio ongeveer 100x sneller scheiden dan realtime op een GPU, waardoor het snel en toegankelijk wordt.