What is Mid-training? Definition | AI Understanding

Ορισμός

Μια ενδιάμεση φάση εκπαίδευσης μεταξύ της προ-προπόνησης και της μετα-εκπαίδευσης, που χρησιμοποιείται συχνά για προσαρμογές ικανοτήτων ή τομέα.

Σχετικοί όροι

Μετά την προπόνηση

Βήματα εκπαίδευσης που εφαρμόζονται μετά την προπόνηση, όπως συντονισμός οδηγιών, βελτιστοποίηση προτιμήσεων και συντονισμός ασφαλείας.

Σύνολο δεδομένων

Μια συλλογή δομημένων ή μη παραδειγμάτων που χρησιμοποιούνται για εκπαίδευση, επικύρωση ή δοκιμή.

Σετ αξιολόγησης

Ένα συγκρατημένο σύνολο δεδομένων που χρησιμοποιείται για τη μέτρηση της ποιότητας του μοντέλου μετά την εκπαίδευση.

Βελτιστοποίηση

Συνεχής εκπαίδευση σε δεδομένα συγκεκριμένου τομέα για την προσαρμογή ενός προεκπαιδευμένου μοντέλου σε μια συγκεκριμένη εργασία.

Προεκπαίδευση

Αρχική εκπαίδευση μοντέλων μεγάλης κλίμακας σε ευρεία δεδομένα πριν από την κατάντη προσαρμογή.

Μοντέλο ανταμοιβής

Ένα μοντέλο που βαθμολογεί τις εξόδους με βάση τα σήματα προτίμησης, που χρησιμοποιείται συχνά σε αγωγούς RLHF.

Μάθετε περισσότερα στους δωρεάν οδηγούς μας

AI Training Lost in the Middle Effect Pseudo-Labeling and Self-Training ELECTRA Pretraining

Δείτε επίσης

Watermarking Citations Self-Play Factuality RAG-Fusion GSM8K Multi-Query Retrieval HumanEval

Περιηγηθείτε στο πλήρες Γλωσσάρι AI Εξερευνήστε όλους τους δωρεάν οδηγούς AI