AI-verklarende term

Wat is BPE (Byte-paarcodering)?

Definitie

Een tokenisatie-algoritme voor subwoorden dat de meest voorkomende tekenparen samenvoegt tot herbruikbare tokens.