co je Parametrově efektivní jemné doladění (PEFT)?

Pokračující školení o datech specifických pro doménu, aby bylo možné předem trénovaný model přizpůsobit konkrétnímu úkolu.

Parametrově efektivní metoda jemného ladění, která přidává matice adaptérů nízké úrovně.

Školicí kroky aplikované po předběžném školení, jako je ladění instrukcí, optimalizace preferencí a ladění bezpečnosti.

Jemné doladění modelu na párech instrukce-odpověď pro zlepšení plnění úkolů.

Tréninkový hyperparametr, který řídí, jak moc se parametry mění v každém kroku aktualizace.

Tréninková metoda, která dolaďuje modely přímo na preferenčních párech bez nutnosti samostatného modelu odměn.