Terug naar alle quizzenGids-gekoppelde quizMiddelmatig Niveau6 Vragen

Tokenisatie en bytepaarcoderingsquiz

Test wat u weet over hoe tekst tokens wordt en hoe BPE een woordenschat opbouwt.

Gerelateerde gidspadenTokenisatie en bytepaarcodering
Vraag 1 van 6

Wat levert tokenisatie op voor het lezen van een taalmodel?