Terug naar alle quizzenGids-gekoppelde quizMiddelmatig Niveau6 Vragen

Zinstuk-tokenisatiequiz

Beoordeel uw begrip van hoe SentencePiece onbewerkte tekst op een taalonafhankelijke, omkeerbare manier tokeniseert.

Gerelateerde gidspaden

Vraag 1 van 6Juist: 0

Op welke belangrijke veronderstelling vermijdt SentencePiece waar traditionele tokenizers op vertrouwen?