VolgendeVolgende gids
Afbeelding van tekst naar afbeelding
Visuele AI
Visuele AI-GIDS
Image Matting is de kunst van het uit een foto knippen van een onderwerp met pixel-perfecte, semi-transparante randen, waardoor elke piekerige haarlok of bewegingsonscherpte wordt vastgelegd.
Luister naar deze gidsAI-verteld · ~2 min
In tegenstelling tot eenvoudige segmentatie schat het hoeveel van elke pixel tot de voorgrond behoort.
Matting lost de compositievergelijking op: elke waargenomen pixel is een mengsel van een voorgrondkleur en een achtergrondkleur, gemengd met een alfawaarde tussen 0 en 1. Het doel is om die alfamatte te herstellen: een zacht masker waarbij 1 volledig voorgrond is, 0 volledig achtergrond, en fractionele waarden vage of doorschijnende gebieden vastleggen. Dit is wiskundig onderbepaald, dus vertrouwden klassieke methoden op een door de gebruiker getekende trimap die een duidelijke voorgrond, een duidelijke achtergrond en onbekende zones markeerde. Deep-learning benaderingen zoals Deep Image Matting (2017) leren alfa rechtstreeks te voorspellen op basis van afbeeldingen en trimaps, terwijl nieuwere trimap-vrije modellen zoals MODNet en Robust Video Matting de mat in realtime schatten op basis van alleen een portret- of webcamfeed.
Virtuele achtergronden bij videoconferenties, waarbij de ruimte achter een luidspreker in realtime wordt vervangen
Film- en tv-compositie op een groen scherm, waarbij acteurs met zuivere haarranden worden geëxtraheerd voor VFX
E-commerce productfoto's, waarbij items automatisch op een schone witte achtergrond worden geplaatst
Portretmodus en het maken van stickers in telefoonapps, waardoor mensen niet meer op sociale media kunnen delen
Matting evolueert naar volledig automatische, realtime, trimap-vrije werking op video, waardoor achtergrondvervanging bij videogesprekken al mogelijk wordt. Onderzoek stimuleert een hogere resolutie, een betere omgang met complexe transparantie zoals glas en rook, en een nauwere integratie met generatieve modellen voor relighting en naadloze composities. Verwacht dat matting zal samensmelten met op diffusie gebaseerde bewerkingspijplijnen, zodat het uitsnijden van een onderwerp en het in een nieuwe, lichtconsistente scène plaatsen een enkele geautomatiseerde stap op consumentenapparaten wordt.
Gratis nieuwsbrief
Drie verifieerde AI-verhalen elke weekdagmorgen, geschreven in eenvoudig Engels. Gratis voor altijd, geen advertenties.
Eén e-mail elke weekdag. Afmelden met één klik. We verkopen of delen je adres nooit.
Test jezelf
Directe feedback op elke antwoord, en een deelbare certificaat met een verifieerbare ID zodra je een cursus hebt afgerond.
Ondersteun gratis AI-onderwijs. AI Understanding is een 501(c)(3) non-profit — geen advertenties, geen betaalmuur, nooit. Doe een donatie
Image Matting is de kunst van het uit een foto knippen van een onderwerp met pixel-perfecte, semi-transparante randen, waardoor elke piekerige haarlok of bewegingsonscherpte wordt vastgelegd. In tegenstelling tot eenvoudige segmentatie schat het hoeveel van elke pixel tot de voorgrond behoort.
Alfa is de dekking per pixel: 1 is volledige voorgrond, 0 is volledige achtergrond en fracties vangen zachte of transparante gebieden op.
Segmentatie geeft een hard voorgrond-/achtergrondlabel, terwijl mattering de continue alfawaarden herstelt voor fijne, semi-transparante details.
Een trimap verdeelt het beeld in een bekende voorgrond, een bekende achtergrond en een onbekende band waar alfa moet worden opgelost.
Deze nieuwere netwerken schatten de alfamatte rechtstreeks op basis van een portret of video zonder dat een door de gebruiker aangeleverde trimap nodig is.
Het compositorische verlies stelt voor- en achtergrond opnieuw samen met behulp van de voorspelde alfa en vergelijkt het resultaat met de invoer, waardoor de nauwkeurigheid wordt verbeterd.
Blijf leren
Er zijn meer handleidingen voor dit onderwerp geselecteerd
VolgendeVolgende gids
Afbeelding van tekst naar afbeelding
Visuele AI