Istilah Glosari AI

Apakah Penalaan Halus Cekap Parameter (PEFT)?

Definisi

Kaedah yang menyesuaikan model dengan melatih subset kecil parameter tambahan.

Semak imbas Glosari AI penuhTerokai semua panduan AI percuma

Istilah berkaitan

Penalaan HalusMeneruskan latihan tentang data khusus domain untuk menyesuaikan model pra-latihan kepada tugas tertentu.LoRA (Penyesuaian Peringkat Rendah)Kaedah penalaan halus yang cekap parameter yang menambah matriks penyesuai peringkat rendah.Selepas latihanLangkah latihan digunakan selepas pralatihan, seperti penalaan arahan, pengoptimuman keutamaan dan penalaan keselamatan.Penalaan ArahanMemperhalusi model pada pasangan arahan-tindak balas untuk menambah baik mengikut tugasan.Kadar PembelajaranHiperparameter latihan yang mengawal berapa banyak parameter mengubah setiap langkah kemas kini.DPO (Pengoptimuman Keutamaan Langsung)Kaedah latihan yang memperhalusi model secara langsung pada pasangan pilihan tanpa memerlukan model ganjaran yang berasingan.

Ketahui lebih lanjut dalam panduan percuma kami

Fine-TuningHard Parameter Sharing in Multi-Task NetworksGumbel-Softmax and ReparameterizationRejection Sampling Fine-Tuning

Lihat juga

ParameterPerplexityOverfittingPipelineOpen-Source ModelPrecisionOCR (Optical Character Recognition)Pretraining