Powrót do wszystkich quizówQuiz połączony z przewodnikiemŚredni Poziom6 Pytania

Quiz dotyczący tokenizacji i kodowania par bajtów

Sprawdź, co wiesz o tym, jak tekst staje się tokenami i jak BPE buduje słownictwo.

Powiązane ścieżki prowadząceTokenizacja i kodowanie par bajtów
Pytanie 1 z 6

Co powoduje tokenizacja, aby model języka mógł czytać?