AI-verklarende term
Wat is BPE (Byte-paarcodering)?
Definitie
Een tokenisatie-algoritme voor subwoorden dat de meest voorkomende tekenparen samenvoegt tot herbruikbare tokens.
AI-verklarende term
Een tokenisatie-algoritme voor subwoorden dat de meest voorkomende tekenparen samenvoegt tot herbruikbare tokens.