คืออะไร การเรียนรู้อย่างต่อเนื่อง?

เทนเซอร์คีย์และค่าที่จัดเก็บไว้จากโทเค็นก่อนหน้าซึ่งช่วยให้หม้อแปลงสร้างโทเค็นใหม่โดยไม่ต้องคำนวณความสนใจในอดีตใหม่

แบบจำลองทำงานได้ดีเพียงใดกับข้อมูลใหม่ที่มองไม่เห็นนอกชุดการฝึก

จุดเวลาล่าสุดสะท้อนให้เห็นในข้อมูลการฝึกของโมเดล

รูปแบบการเรียนรู้จากข้อมูลที่ไม่มีป้ายกำกับโดยไม่มีเอาต์พุตเป้าหมายที่ชัดเจน

การแก้ปัญหาโดยไม่มีตัวอย่างเฉพาะงานโดยอาศัยความรู้ทั่วไปก่อนหน้า

เทคนิคที่สร้างตัวอย่างการฝึกอบรมที่ปรับเปลี่ยนเพื่อปรับปรุงการวางนัยทั่วไปของโมเดล