কি BPE (বাইট পেয়ার এনকোডিং)?

মডেল ইনপুটের জন্য টোকেনে পাঠ্য বিভক্ত করার প্রক্রিয়া।

প্রযুক্তি যা চিত্রের পাঠ্যকে রূপান্তর করে বা স্ক্যান করে মেশিন-পাঠযোগ্য পাঠ্যে।

একটি ডিকোডিং কৌশল যা শুধুমাত্র k থেকে সম্ভবত পরবর্তী টোকেনগুলির নমুনা নেয়৷

মূল প্রশিক্ষণ অ্যালগরিদম যা নেটওয়ার্কের মাধ্যমে পূর্বাভাস ত্রুটিগুলিকে পিছনের দিকে প্রচার করে মডেল ওজন আপডেট করে।

একটি মডেল যা প্রশ্ন এবং নথিগুলিকে পৃথক ভেক্টরে এনকোড করে যাতে সেগুলি দ্রুত স্কেলে তুলনা করা যায়।

একটি ডিকোডিং অ্যালগরিদম যা উচ্চ-সম্ভাব্যতার আউটপুটগুলি খুঁজে পেতে প্রতিটি ধাপে শীর্ষ কয়েকটি প্রার্থীর ক্রম রাখে।