Termine del glossario AI

Che cos’è BPE (codifica coppia di byte)?

Definizione

Un algoritmo di tokenizzazione delle sottoparole che unisce le coppie di caratteri più frequenti in token riutilizzabili.