Що є Параметричне точне налаштування (PEFT)?

Постійне навчання на предметних даних для адаптації попередньо навченої моделі до конкретного завдання.

Ефективний метод тонкого налаштування параметрів, який додає низькорангові матриці адаптерів.

Етапи навчання, які застосовуються після попереднього навчання, наприклад налаштування інструкцій, оптимізація параметрів і налаштування безпеки.

Точне налаштування моделі на парах інструкція-відповідь для покращення виконання завдань.

Навчальний гіперпараметр, який контролює, скільки параметрів змінюється на кожному кроці оновлення.

Метод навчання, який точно налаштовує моделі безпосередньо на пари переваг без необхідності окремої моделі винагороди.