Istilah Glosarium AI

Apa itu DPO (Optimasi Preferensi Langsung)?

Definisi

Metode pelatihan yang menyempurnakan model secara langsung pada pasangan preferensi tanpa memerlukan model imbalan terpisah.

Jelajahi Glosarium AI selengkapnyaJelajahi semua panduan AI gratis

Istilah terkait

Pembelajaran Penguatan dari Umpan Balik Manusia (RLHF)Sebuah metode pelatihan yang menggunakan sinyal preferensi manusia untuk membentuk perilaku model.Pasca pelatihanLangkah-langkah pelatihan diterapkan setelah pra-pelatihan, seperti penyetelan instruksi, optimalisasi preferensi, dan penyetelan keselamatan.Pembelajaran BerkelanjutanPendekatan pelatihan yang memungkinkan model terus belajar dari data baru tanpa melupakan pengetahuan sebelumnya.PenyempurnaanMelanjutkan pelatihan pada data spesifik domain untuk mengadaptasi model yang telah dilatih sebelumnya ke tugas tertentu.Penurunan GradienMetode optimasi yang memperbarui parameter ke arah yang mengurangi kesalahan.Penyetelan InstruksiMenyempurnakan model pasangan instruksi-respons untuk meningkatkan kemampuan mengikuti tugas.

Pelajari lebih lanjut di panduan gratis kami

AI Inference OptimizationBidirectional Recurrent NetworksSecond-Order Optimization and Newton MethodsOdds Ratio Preference Optimization

Lihat juga

Tree of ThoughtsQLoRAReActFlash AttentionAgentic LoopMulti-Head AttentionMCP (Model Context Protocol)Positional Encoding