Термин от речника на AI

Какво е DPO (директна оптимизация на предпочитанията)?

Определение

Метод на обучение, който прецизира моделите директно върху двойки предпочитания, без да е необходим отделен модел на възнаграждение.

Разгледайте пълния AI речникРазгледайте всички безплатни ръководства за AI

Свързани термини

Обучение за подсилване от човешка обратна връзка (RLHF)Метод на обучение, който използва сигнали за човешки предпочитания, за да оформи поведението на модела.След тренировкаСтъпки на обучение, приложени след предварително обучение, като настройка на инструкциите, оптимизиране на предпочитанията и настройка на безопасността.Непрекъснато обучениеПодходи за обучение, които позволяват на модела да продължи да се учи от нови данни, без да забравя предишни знания.Фина настройкаПродължаващо обучение върху специфични за домейн данни за адаптиране на предварително обучен модел към конкретна задача.Градиентно спусканеМетод за оптимизация, който актуализира параметрите в посока, която намалява грешката.Инструкция за настройкаФина настройка на модел на двойки инструкция-отговор, за да се подобри изпълнението на задачата.

Научете повече в нашите безплатни ръководства

AI Inference OptimizationBidirectional Recurrent NetworksSecond-Order Optimization and Newton MethodsOdds Ratio Preference Optimization

Вижте също

Tree of ThoughtsQLoRAReActFlash AttentionAgentic LoopMulti-Head AttentionMCP (Model Context Protocol)Positional Encoding