गाइड से जुड़ी प्रश्नोत्तरी · मध्यम स्तर

केएल डाइवर्जेंस प्रश्नोत्तरी

बिट्स में केएल विचलन की गणना करें और विषमता, समर्थन बेमेल, क्रॉस-एन्ट्रॉपी और संदर्भ-वितरण दिशा के बारे में कारण बताएं।

संबंधित मार्गदर्शक पथकेएल विचलन
प्रश्न 1 का 8

D_KL(p||q) में, कौन सा वितरण लॉग-अनुपात शर्तों को महत्व देता है?

प्रत्येक प्रश्न का पूर्वावलोकन करें8 प्रश्न

जैसे ही आप प्रश्नोत्तरी लेते हैं उत्तर और स्पष्टीकरण दिखाई देते हैं।

  1. D_KL(p||q) में, कौन सा वितरण लॉग-अनुपात शर्तों को महत्व देता है?
    • p
    • q
    • उनका भार रहित औसत
    • बड़ी एन्ट्रापी के साथ वितरण
  2. केएल विचलन एक सामान्य सममित दूरी क्यों नहीं है?
    • यह केवल नकारात्मक हो सकता है
    • p और q की अदला-बदली से आम तौर पर मान बदल जाता है
    • इसका कोई लघुगणक नहीं है
    • यह हमेशा बिल्कुल एक ही होता है
  3. p(x)>0 और q(x)=0 के लिए, संबंधित फॉरवर्ड केएल योगदान का क्या होता है?
    • यह हमेशा एक बिट होता है
    • वह शून्य हो जाता है
    • यह अनंत की ओर विमुख हो जाता है
    • पी की परवाह किए बिना इसे छोड़ दिया गया है
  4. निष्पक्ष-बनाम-पक्षपाती सिक्के के उदाहरण में, एक सारांश नकारात्मक क्यों हो सकता है जबकि कुल केएल गैर-नकारात्मक रहता है?
    • लॉग आधार नकारात्मक शब्दों को अमान्य बनाता है
    • प्रत्येक पद का सकारात्मक होना आवश्यक है
    • योग के बाद सूत्र एक निरपेक्ष मान लेता है
    • व्यक्तिगत लॉग अनुपात नकारात्मक हो सकते हैं, हालांकि भारित कुल गैर-नकारात्मक है
  5. आधार-दो लघुगणक का उपयोग करने से किस इकाई का परिणाम मिलता है?
    • नट
    • बिट्स
    • मीटर
    • प्रतिशत अंक
  6. क्रॉस-एन्ट्रॉपी एन्ट्रॉपी और फॉरवर्ड केएल से कैसे संबंधित है?
    • q भिन्न होने पर यह हमेशा शून्य होता है
    • यह D_KL(Q||P) माइनस एन्ट्रॉपी के बराबर है
    • एच(पी,क्यू) = एच(पी) + डी_केएल(पी||क्यू)
    • यह केएल का व्युत्क्रम है
  7. SciPy की एन्ट्रॉपी (पीके, क्यूके) में, क्यूके अनुरोध की आपूर्ति क्या करती है?
    • संभावनाएँ स्वतंत्र हैं या नहीं इसका परीक्षण
    • qk की केवल शैनन एन्ट्रापी
    • दोनों सरणियों के बीच एक सममित दूरी
    • qk के सापेक्ष pk का उपयोग करते हुए सापेक्ष एन्ट्रापी
  8. सतत केएल के बारे में कौन सा कथन सटीक है?
    • यह पी के तहत एक लॉग घनत्व अनुपात को एकीकृत करता है और अनंत है यदि पी सकारात्मक द्रव्यमान रखता है जहां क्यू का घनत्व शून्य है
    • यह प्रत्येक वास्तविक-मूल्यवान परिणाम पर बिंदु संभावनाओं का योग करता है
    • जब भी दोनों वितरणों में घनत्व होता है तो यह हमेशा सीमित होता है
    • तुलनात्मक वितरण के लिए इसमें कोई समर्थन शर्त नहीं है