सीखें समाचार टूल्स नौकरियां मिशन

एआई शब्दावली शब्द

उपस्थिति दंड क्या है?

परिभाषा

एक डिकोडिंग सेटिंग जो टोकन के प्रकट होने की संभावना को कम करती है, नए विषयों को प्रोत्साहित करती है।

संपूर्ण AI शब्दावली ब्राउज़ करें सभी निःशुल्क एआई गाइडों का अन्वेषण करें

बारंबारता दंडएक डिकोडिंग सेटिंग जो टोकन की संभावना को आनुपातिक रूप से कम कर देती है कि वे अब तक कितनी बार दिखाई दिए हैं।पुनरावृत्ति दंडएक डिकोडिंग सेटिंग जो लूप को कम करने के लिए मॉडल द्वारा पहले ही उत्पादित टोकन की संभावना को कम कर देती है।टॉप-के नमूनाकरणएक डिकोडिंग रणनीति जो केवल k के सबसे संभावित अगले टोकन से नमूने लेती है।संरक्षित डिकोडिंगएक पीढ़ी की रणनीति जो आउटपुट टोकन को वैध संरचनाओं या नीति-अनुपालक विकल्पों तक सीमित करती है।सट्टा डिकोडिंगएक अनुमान त्वरण विधि जहां एक छोटा ड्राफ्ट मॉडल टोकन प्रस्तावित करता है जिसे एक बड़ा मॉडल समानांतर में सत्यापित करता है।केवी कैशपिछले टोकन से संग्रहीत कुंजी और मूल्य टेंसर जो ट्रांसफार्मर को पिछले ध्यान की पुनर्गणना किए बिना नए टोकन उत्पन्न करने देते हैं।

हमारी निःशुल्क मार्गदर्शिकाओं में और जानें

Repetition Penalty and Decoding Controls

यह भी देखें

Beam Search Parent-Document Retrieval Multi-Query Retrieval RAG-Fusion Self-Play Post-training Mid-training Watermarking