Kvíz spojený s průvodcem · Střední úroveň
Behaviorální testování modelů ML Kvíz
Rozlišujte invariantnost, směrové testy a testy minimální funkčnosti a pochopte, proč kontroly chování doplňují souhrnné hodnocení.
Otázka 1 z 8
Změna interpunkce by měla zachovat význam věty. Který typ testu kontroluje stabilitu výstupu?
Náhled každé otázky8 otázky
Odpovědi a vysvětlení se zobrazují, jak budete v kvízu.
- Změna interpunkce by měla zachovat význam věty. Který typ testu kontroluje stabilitu výstupu?
- Invariance testing
- Directional expectation testing
- Minimum functionality testing
- A random train-test split
- Model by měl reagovat v určeném směru, když se jeden ověřený vstup zvýší. Který typ testu se hodí?
- Invariance
- Directional expectation
- Minimum functionality
- Serialization testing
- Test kontroluje, zda model dokáže zachovat negaci v jednoduchém příkladu překladu, aniž by porovnával transformované vstupní páry. Která kategorie to odpovídá?
- Performance latency
- Invariance testing
- Minimum functionality testing
- Data drift monitoring
- Proč by měl tým přezkoumat očekávané chování před tím, než jej zakóduje jako test?
- Review makes model outputs deterministic
- Any expected behavior automatically proves fairness
- The test suite creates ground-truth labels
- The transformation or expectation may not be valid for every context
- Co dokazuje úspěšné absolvování malé sady behaviorálních testů?
- The model is robust to every distribution shift
- The model passed those specified cases, not all production conditions
- The model is calibrated across all groups
- The test set is representative by definition
- How does metamorphic testing relate to behavioral tests?
- It requires a correct reference label for every transformed input
- It checks only exact equality across all transformations
- It checks expected relations between outputs when exact answers are unavailable
- It applies only to image models and not other input types
- Why can a brittle invariance test be inappropriate?
- The model must be retrained for each sentence
- Invariance tests cannot compare outputs
- All model probabilities are fixed
- The transformation may change meaning for some examples
- Which evaluation should behavioral tests complement?
- Representative held-out metrics and other model checks
- Only the training-set score
- No other evaluation is needed
- A package installation checklist only