Istilah Glosari AI

Apakah Penyulingan Pengetahuan?

Definisi

Melatih model yang lebih kecil untuk meniru keluaran model yang lebih besar.

Semak imbas Glosari AI penuhTerokai semua panduan AI percuma

Istilah berkaitan

PenyulinganMemampatkan pengetahuan daripada model guru yang besar kepada model pelajar yang lebih kecil.Model SulingModel yang lebih kecil dilatih untuk meniru tingkah laku model yang lebih besar sambil menggunakan kurang pengiraan pada inferens.Potongan PengetahuanTitik masa terkini ditunjukkan dalam data latihan model.Pembelajaran BerterusanPendekatan latihan yang membolehkan model terus belajar daripada data baharu tanpa melupakan pengetahuan terdahulu.Pembelajaran yang diseliaMelatih model dengan contoh berlabel yang memetakan input kepada output yang diketahui.AI berperlembagaanPendekatan latihan dan pembentukan tingkah laku di mana output model dipandu oleh set tetap prinsip bertulis.

Ketahui lebih lanjut dalam panduan percuma kami

AI Knowledge ManagementDINO Self-DistillationGraphRAG Knowledge GraphsDreamFusion and Score Distillation Sampling

Lihat juga

Knowledge GraphJailbreakLabel SmoothingIntent ClassificationLatencyInstruction TuningLarge Language Model (LLM)Inference-Time Compute