गाइड से जुड़ी प्रश्नोत्तरी · मध्यम स्तर

कोहेन की कप्पा प्रश्नोत्तरी

श्रेणीगत लेबलों के कार्यशील उदाहरणों के माध्यम से देखी गई और अपेक्षित सहमति, भारित कप्पा और एनोटेशन विश्वसनीयता का पता लगाएं।

संबंधित मार्गदर्शक पथकोहेन्स कप्पा
प्रश्न 1 का 8

दो व्याख्याकारों ने 0.8 की सहमति और 0.5 की अपेक्षित सहमति देखी है। कौन सा कप्पा मान अनुसरण करता है?

प्रत्येक प्रश्न का पूर्वावलोकन करें8 प्रश्न

जैसे ही आप प्रश्नोत्तरी लेते हैं उत्तर और स्पष्टीकरण दिखाई देते हैं।

  1. दो व्याख्याकारों ने 0.8 की सहमति और 0.5 की अपेक्षित सहमति देखी है। कौन सा कप्पा मान अनुसरण करता है?
    • 0.3
    • 0.4
    • 0.8
    • 0.6
  2. One annotator uses a category 60% of the time and the other uses it 50% of the time. How much does that category contribute to expected agreement?
    • 0.10
    • 0.30
    • 0.55
    • 1.10
  3. कप्पा में अपेक्षित-समझौता शब्द यह क्यों स्थापित नहीं करता है कि व्याख्याकार बेतरतीब ढंग से अनुमान लगा रहे थे?
    • It is calculated from the number of disagreements alone
    • It is identical to the observed agreement for every dataset
    • It is a reference derived from label frequencies, not an observation of their reasoning
    • It assumes every category must have equal frequency
  4. निम्न, मध्यम और उच्च घटना की गंभीरता के लिए, कोई टीम भारित कप्पा क्यों चुन सकती है?
    • To give different penalties to one-level and two-level disagreements
    • To remove all disagreements from the calculation
    • To guarantee a higher reliability score
    • To avoid specifying a category order
  5. दोनों व्याख्याकार प्रत्येक मामले को एक ही श्रेणी में निर्दिष्ट करते हैं। साधारण कप्पा को सीधी विश्वसनीयता की सफलता के रूप में क्यों रिपोर्ट नहीं किया जाना चाहिए?
    • Perfect raw agreement automatically makes kappa one
    • The score ignores the common category and evaluates only disagreements
    • Subtracting expected agreement alone gives a complete kappa calculation
    • Expected agreement is one, leaving a zero denominator
  6. दूसरा समीक्षक पहले समीक्षक के लेबल की प्रतिलिपि बनाता है और पूर्ण सहमति प्राप्त करता है। कौन सा निष्कर्ष उचित है?
    • The labels have been independently validated
    • The agreement does not establish independent reliability
    • Every label is necessarily correct
    • The dataset can be used without checking instructions
  7. Which accompanying information helps interpret a kappa score when category frequencies are uneven?
    • Only the raw agreement percentage, without category counts
    • Only whether kappa exceeds a universal cutoff
    • Sample size, raw agreement and the agreement table
    • Only the weighted score, without specifying category order
  8. Two annotators both follow a mistaken rule and agree strongly. What does their high kappa fail to establish?
    • That their labels are factually correct
    • That their observed agreement exceeds its frequency-based expectation
    • That they used the same labels on many cases
    • That their assignments show consistency under the shared rule