AI-verklarende term

Wat is Token?

Definitie

Een stuk tekst dat wordt verwerkt door taalmodellen, zoals een woordstuk of symbool.