คำศัพท์อภิธานศัพท์ AI

คืออะไร การลงโทษความถี่?

คำนิยาม

การตั้งค่าการถอดรหัสที่ลดความน่าจะเป็นของโทเค็นตามสัดส่วนกับความถี่ที่ปรากฏจนถึงปัจจุบัน

ข้อกำหนดที่เกี่ยวข้อง

การลงโทษการแสดงตน
การตั้งค่าการถอดรหัสที่ลดความน่าจะเป็นของโทเค็นที่ปรากฏเลย กระตุ้นให้เกิดหัวข้อใหม่
บทลงโทษการทำซ้ำ
การตั้งค่าการถอดรหัสที่ลดความน่าจะเป็นของโทเค็นที่โมเดลได้สร้างไว้แล้วเพื่อลดการวนซ้ำ
Perplexity
ตัวชี้วัดแบบจำลองภาษาที่วัดว่าแบบจำลองนั้นน่าประหลาดใจเพียงใดด้วยโทเค็นถัดไปที่แท้จริง
การสุ่มตัวอย่าง Top-k
กลยุทธ์การถอดรหัสที่สุ่มตัวอย่างจากโทเค็นที่น่าจะถัดไปมากที่สุดเท่านั้น
การถอดรหัสที่ได้รับการปกป้อง
กลยุทธ์การสร้างที่จำกัดโทเค็นเอาท์พุตให้มีโครงสร้างที่ถูกต้องหรือตัวเลือกที่สอดคล้องกับนโยบาย
การถอดรหัสเก็งกำไร
วิธีการเร่งความเร็วอนุมานที่แบบจำลองร่างขนาดเล็กเสนอโทเค็นที่แบบจำลองขนาดใหญ่ตรวจสอบพร้อมกัน

เรียนรู้เพิ่มเติมในคำแนะนำฟรีของเรา

ดูเพิ่มเติม