क्या है? Perplexity?

एक कोड-मूल्यांकन मीट्रिक इस संभावना को मापता है कि k उत्पन्न नमूनों में से कम से कम एक परीक्षण में उत्तीर्ण होता है।

एक भाषा मॉडल एक बार में इनपुट टोकन की अधिकतम मात्रा संसाधित कर सकता है।

एक डिकोडिंग रणनीति जो केवल k के सबसे संभावित अगले टोकन से नमूने लेती है।

एक सांख्यिकीय श्रेणी जिसमें संभावित रूप से मापे गए मॉडल मीट्रिक का सही मान शामिल होता है।

एक डिकोडिंग सेटिंग जो टोकन की संभावना को आनुपातिक रूप से कम कर देती है कि वे अब तक कितनी बार दिखाई दिए हैं।

एक डिकोडिंग सेटिंग जो टोकन के प्रकट होने की संभावना को कम करती है, नए विषयों को प्रोत्साहित करती है।