Nedir Bilgi Damıtma?

Büyük bir öğretmen modelindeki bilgiyi daha küçük bir öğrenci modeline sıkıştırmak.

Çıkarımda daha az işlem kullanırken daha büyük bir modelin davranışını taklit etmek üzere eğitilmiş daha küçük bir model.

Bir modelin eğitim verilerine yansıyan zamandaki en son nokta.

Bir modelin önceki bilgileri unutmadan yeni verilerden öğrenmeye devam etmesine olanak tanıyan eğitim yaklaşımları.

Girdileri bilinen çıktılarla eşleyen etiketli örneklerle bir modelin eğitilmesi.

Model çıktılarının sabit bir dizi yazılı prensip tarafından yönlendirildiği bir eğitim ve davranış şekillendirme yaklaşımı.