What is Mid-training? Definition | AI Understanding

Definicja

Pośrednia faza szkolenia pomiędzy szkoleniem przedtreningowym a szkoleniem poszkoleniowym, często wykorzystywana w celu dostosowania zdolności lub domeny.

Powiązane terminy

Etapy treningu stosowane po treningu wstępnym, takie jak dostrajanie instrukcji, optymalizacja preferencji i dostrajanie bezpieczeństwa.

Zbiór ustrukturyzowanych i nieustrukturyzowanych przykładów używanych do szkolenia, walidacji lub testowania.

Zestaw ewaluacyjny

Przetrzymywany zbiór danych używany do pomiaru jakości modelu po szkoleniu.

Kontynuowanie szkolenia na danych specyficznych dla domeny w celu dostosowania wstępnie wyszkolonego modelu do konkretnego zadania.

Trening wstępny

Wstępne szkolenie w zakresie modeli na dużą skalę na szerokich danych przed adaptacją na późniejszym etapie.

Model oceniający wyniki na podstawie sygnałów preferencji, często używany w potokach RLHF.

Dowiedz się więcej z naszych bezpłatnych przewodników

AI Training Lost in the Middle Effect Pseudo-Labeling and Self-Training ELECTRA Pretraining

Zobacz także

Watermarking Citations Self-Play Factuality RAG-Fusion GSM8K Multi-Query Retrieval HumanEval

Przejrzyj pełny słownik AI Przeglądaj wszystkie bezpłatne przewodniki AI