Какво е Параметрно ефективна фина настройка (PEFT)?

Продължаващо обучение върху специфични за домейн данни за адаптиране на предварително обучен модел към конкретна задача.

Параметрично ефективен метод за фина настройка, който добавя адаптерни матрици с нисък ранг.

Стъпки на обучение, приложени след предварително обучение, като настройка на инструкциите, оптимизиране на предпочитанията и настройка на безопасността.

Фина настройка на модел на двойки инструкция-отговор, за да се подобри изпълнението на задачата.

Хиперпараметър за обучение, контролиращ колко параметри се променят при всяка стъпка на актуализиране.

Метод на обучение, който прецизира моделите директно върху двойки предпочитания, без да е необходим отделен модел на възнаграждение.