What is Mid-training? Definition | AI Understanding

Definizione

Una fase di formazione intermedia tra pre-formazione e post-formazione, spesso utilizzata per adattamenti di capacità o domini.

Termini correlati

Post-allenamento

Passaggi di formazione applicati dopo la formazione preliminare, come l'ottimizzazione delle istruzioni, l'ottimizzazione delle preferenze e la messa a punto della sicurezza.

Una raccolta di esempi strutturati o non strutturati utilizzati per la formazione, la convalida o il test.

Insieme di valutazione

Un set di dati conservato utilizzato per misurare la qualità del modello dopo l'addestramento.

Formazione continua su dati specifici del dominio per adattare un modello pre-addestrato a un compito specifico.

Pre-allenamento

Formazione iniziale del modello su larga scala su dati ampi prima dell'adattamento a valle.

Modello di ricompensa

Un modello che assegna un punteggio agli output in base ai segnali di preferenza, spesso utilizzato nelle pipeline RLHF.

Scopri di più nelle nostre guide gratuite

AI Training Lost in the Middle Effect Pseudo-Labeling and Self-Training ELECTRA Pretraining

Vedi anche

Watermarking Citations Self-Play Factuality RAG-Fusion GSM8K Multi-Query Retrieval HumanEval

Sfoglia il glossario completo dell'intelligenza artificiale Esplora tutte le guide gratuite sull'intelligenza artificiale