คำศัพท์อภิธานศัพท์ AI

RoPE (การฝังตำแหน่งแบบหมุน) คืออะไร?

คำนิยาม

วิธีการเข้ารหัสตำแหน่งที่หมุนแบบสอบถามและเวกเตอร์คีย์เพื่อเข้ารหัสตำแหน่งโทเค็นที่เกี่ยวข้อง

การเข้ารหัสตำแหน่งข้อมูลที่เพิ่มในการฝังโทเค็นเพื่อให้หม้อแปลงสามารถแยกแยะลำดับได้อาลีบีวิธีอคติเชิงตำแหน่งที่ลงโทษคะแนนความสนใจตามระยะทางโทเค็น ช่วยให้แบบจำลองคาดการณ์บริบทที่ยาวขึ้นRAG-ฟิวชั่นวิธีการดึงข้อมูลที่สร้างตัวแปรการสืบค้นหลายรูปแบบ ดึงผลลัพธ์สำหรับแต่ละรายการ และรวมการจัดอันดับANN (เพื่อนบ้านที่ใกล้ที่สุดโดยประมาณ)อัลกอริทึมที่ค้นหาเวกเตอร์ใกล้กับข้อความค้นหาโดยไม่มีการเปรียบเทียบอย่างละเอียด โดยแลกเปลี่ยนความแม่นยำกับความเร็วRAG (การดึงข้อมูล-การสร้างเสริม)วิธีการดึงความรู้จากภายนอกและป้อนเข้าสู่รุ่นในเวลาอนุมานการเรียนรู้การเสริมกำลังจากผลตอบรับของมนุษย์ (RLHF)วิธีการฝึกอบรมที่ใช้สัญญาณความชอบของมนุษย์เพื่อกำหนดรูปแบบพฤติกรรมของโมเดล

เรียนรู้เพิ่มเติมในคำแนะนำฟรีของเรา

ดูเพิ่มเติม