← Retour à tous les quizQuiz lié à un guide • Moyen Niveau • 6 Questions

Quiz sur la tokenisation et le codage de paires d'octets

Testez ce que vous savez sur la façon dont le texte devient des jetons et sur la manière dont BPE construit un vocabulaire.

Chemins de guidage associésTokenisation et codage par paires d'octets
Question 1 de 6

Que produit la tokenisation pour qu'un modèle de langage puisse être lu ?