Termine del glossario AI

Cos'è FrasePezzo?

Definizione

Un tokenizzatore indipendente dalla lingua che apprende le unità delle sottoparole direttamente dal testo non elaborato senza pre-divisione negli spazi bianchi.

Termini correlati

CLIP
Un'architettura del modello multimodale che apprende rappresentazioni condivise tra testo e immagini.
Apprendimento continuo
Approcci di formazione che consentono a un modello di continuare ad apprendere dai nuovi dati senza dimenticare le conoscenze precedenti.
Apprendimento nel contesto
La capacità di un modello di seguire modelli tratti da esempi forniti direttamente nel prompt.
Classificazione degli intenti
Prevedere lo scopo dell'utente da una query di testo per instradarla correttamente.
Modello linguistico di grandi dimensioni (LLM)
Un modello linguistico addestrato su enormi corpora di testo per generare e analizzare testo.
Gettone
Una porzione di testo elaborata da modelli linguistici, ad esempio una parola o un simbolo.

Scopri di più nelle nostre guide gratuite

SentencePiece Tokenization

Vedi anche

BPE (Byte Pair Encoding)ANN (Approximate Nearest Neighbor)Sliding Window AttentionHNSWALiBiRerankerRoPE (Rotary Positional Embeddings)Hybrid Search
Sfoglia il glossario completo dell'intelligenza artificialeEsplora tutte le guide gratuite sull'intelligenza artificiale