Termin ze słownika AI

Czym jest Żeton?

Definicja

Fragment tekstu przetwarzany przez modele językowe, taki jak fragment słowa lub symbol.