Término del glosario de IA

que es Preentrenamiento?

Definición

Entrenamiento inicial de modelos a gran escala sobre datos amplios antes de la adaptación posterior.

Términos relacionados

Post-entrenamiento
Pasos de capacitación aplicados después del entrenamiento previo, como ajuste de instrucciones, optimización de preferencias y ajuste de seguridad.
Grandes datos
Conjuntos de datos muy grandes y complejos que requieren técnicas de procesamiento y almacenamiento escalables.
Aprendizaje continuo
Enfoques de entrenamiento que permiten que un modelo siga aprendiendo de nuevos datos sin olvidar el conocimiento previo.
Aumento de datos
Técnicas que crean ejemplos de entrenamiento modificados para mejorar la generalización del modelo.
Ajuste fino
Capacitación continua sobre datos de dominios específicos para adaptar un modelo previamente entrenado a una tarea específica.
Modelo de cimentación
Un gran modelo previamente entrenado que se puede adaptar a muchas tareas posteriores.

Obtenga más información en nuestras guías gratuitas.

ELECTRA Pretraining

See also

PrecisionPromptPipelinePrompt EngineeringPerplexityPrompt InjectionParameter-Efficient Fine-Tuning (PEFT)Pruning
Explore el glosario completo de IAExplora todas las guías gratuitas de IA