Kvíz spojený s průvodcem · Střední úroveň

Behaviorální testování modelů ML Kvíz

Rozlišujte invariantnost, směrové testy a testy minimální funkčnosti a pochopte, proč kontroly chování doplňují souhrnné hodnocení.

Související vodicí cestyBehaviorální testování ML modelů
Otázka 1 z 8

Změna interpunkce by měla zachovat význam věty. Který typ testu kontroluje stabilitu výstupu?

Náhled každé otázky8 otázky

Odpovědi a vysvětlení se zobrazují, jak budete v kvízu.

  1. Změna interpunkce by měla zachovat význam věty. Který typ testu kontroluje stabilitu výstupu?
    • Invariance testing
    • Directional expectation testing
    • Minimum functionality testing
    • A random train-test split
  2. Model by měl reagovat v určeném směru, když se jeden ověřený vstup zvýší. Který typ testu se hodí?
    • Invariance
    • Directional expectation
    • Minimum functionality
    • Serialization testing
  3. Test kontroluje, zda model dokáže zachovat negaci v jednoduchém příkladu překladu, aniž by porovnával transformované vstupní páry. Která kategorie to odpovídá?
    • Performance latency
    • Invariance testing
    • Minimum functionality testing
    • Data drift monitoring
  4. Proč by měl tým přezkoumat očekávané chování před tím, než jej zakóduje jako test?
    • Review makes model outputs deterministic
    • Any expected behavior automatically proves fairness
    • The test suite creates ground-truth labels
    • The transformation or expectation may not be valid for every context
  5. Co dokazuje úspěšné absolvování malé sady behaviorálních testů?
    • The model is robust to every distribution shift
    • The model passed those specified cases, not all production conditions
    • The model is calibrated across all groups
    • The test set is representative by definition
  6. How does metamorphic testing relate to behavioral tests?
    • It requires a correct reference label for every transformed input
    • It checks only exact equality across all transformations
    • It checks expected relations between outputs when exact answers are unavailable
    • It applies only to image models and not other input types
  7. Why can a brittle invariance test be inappropriate?
    • The model must be retrained for each sentence
    • Invariance tests cannot compare outputs
    • All model probabilities are fixed
    • The transformation may change meaning for some examples
  8. Which evaluation should behavioral tests complement?
    • Representative held-out metrics and other model checks
    • Only the training-set score
    • No other evaluation is needed
    • A package installation checklist only