Co jest Destylacja?

Trenowanie mniejszego modelu w celu imitowania wyników większego modelu.

Podejścia szkoleniowe, które pozwalają modelowi uczyć się na nowych danych, nie zapominając o wcześniejszej wiedzy.

Metoda, która pobiera wiedzę zewnętrzną i przekazuje ją do generowania w momencie wnioskowania.

Znalezienie odpowiednich dokumentów lub zapisów ze źródła wiedzy dla zapytania.

Rejestr tego, skąd pochodzą dane, w jaki sposób zostały przekształcone i gdzie są wykorzystywane.

Technika prywatności, która dodaje szum statystyczny, uniemożliwiając wiarygodne wywnioskowanie poszczególnych zapisów z wyników.