แบบทดสอบที่เชื่อมโยงกับคำแนะนำ · ปานกลาง ระดับ
คำถามสัมภาษณ์ทางสถิติสำหรับแบบทดสอบวิทยาศาสตร์ข้อมูล
ทดสอบการตีความค่า p ความสำคัญและความสำคัญเชิงปฏิบัติ การเปรียบเทียบหลายรายการ และสมมติฐานเบื้องหลังการทดลองวิทยาศาสตร์ข้อมูล
คำถาม 1 ของ 8
ภายใต้คำจำกัดความของ NIST ค่า p-value อธิบายอะไร
ดูตัวอย่างทุกคำถาม8 คำถาม
คำตอบและคำอธิบายจะปรากฏขึ้นเมื่อคุณทำแบบทดสอบ
- ภายใต้คำจำกัดความของ NIST ค่า p-value อธิบายอะไร
- The size of the business impact caused by the treatment
- The probability of a test statistic at least as extreme as observed, assuming the null hypothesis is true
- The probability that the null hypothesis is true
- The probability the alternative hypothesis is true
- ผู้สมัครเห็นค่า p เล็กน้อย พวกเขาควรหลีกเลี่ยงข้อความใด
- “The result is evaluated under a specified null hypothesis.”
- “The observed statistic would be unusual under the null model.”
- “I should also assess effect size and study assumptions.”
- “This is the probability that the null hypothesis is true.”
- เหตุใดจึงควรเลือกเกณฑ์ที่มีนัยสำคัญก่อนตรวจสอบผลลัพธ์
- To avoid selecting a decision rule after seeing which result looks favorable
- To ensure the measured effect is large enough to matter
- To remove the need for a sampling plan
- To guarantee the null hypothesis is false
- ทีมเปรียบเทียบผลลัพธ์หลายรายการและหลายคู่ ควรพิจารณาประเด็นทางสถิติอะไรบ้าง
- The smallest p-value is always the true effect
- Adding outcomes removes the need for a hypothesis
- Multiple comparisons can make repeated unadjusted testing misstate the overall error rate
- Each comparison automatically becomes independent evidence
- วิธีใดสามารถควบคุมระดับข้อผิดพลาดโดยรวมที่ต้องการสำหรับการเปรียบเทียบตามแผนได้
- Replace the outcome with a post hoc metric
- Use an appropriate multiple-comparison procedure, such as Bonferroni when suitable
- Choose whichever comparison has the lowest p-value after analysis
- Ignore all comparisons except the one with the largest effect
- A result is statistically detectable but has a negligible effect on the product outcome. What should the analyst say?
- Statistical evidence and practical importance are different questions
- A small p-value proves the change is worth shipping
- Statistical significance measures revenue impact directly
- Effect size is irrelevant once a threshold is crossed
- Before interpreting an A/B test result, which design question matters?
- Which graph color makes the result look clearest
- Whether the reported p-value has enough decimal places
- Which team prefers the treatment
- How assignment occurred and whether groups or observations satisfy the analysis assumptions
- What can a non-significant result establish by itself?
- The treatment has no practical or statistical effect
- The experiment had enough power for every relevant effect
- It does not prove there is no effect; the result may be inconclusive
- The null hypothesis is certainly true