Gids-gekoppelde quiz · Middelmatig Niveau

Modeldriftdetectiequiz

Bekijk data- en conceptdrift, distributiemonitoring, KS-vergelijkingen, vertraagde labels en zorgvuldige reacties op driftwaarschuwingen.

Gerelateerde gidspadenDetectie van modelafwijkingen
Vraag 1 van 8

Wat is het verschil tussen datadrift en conceptdrift?

Bekijk elke vraag8 vragen

Antwoorden en uitleg verschijnen terwijl je de quiz doet.

  1. Wat is het verschil tussen datadrift en conceptdrift?
    • Datadrift verandert de distributie van de input; conceptdrift verandert de input-naar-output-relatie
    • Het zijn twee namen voor hetzelfde
    • Gegevensdrift heeft alleen invloed op afbeeldingen; conceptdrift heeft alleen invloed op tekst
    • Gegevensdrift vindt plaats tijdens training; conceptdrift vindt plaats tijdens het testen
  2. How should a team interpret a PSI value such as 0.30?
    • As a guarantee that model accuracy has fallen
    • As a signal to investigate under the chosen monitoring policy, not a universal proof of harmful drift
    • As an identical threshold for every feature and population
    • As proof that retraining must begin immediately
  3. Waarom kan op input gebaseerde driftdetectie een vroegtijdige waarschuwing geven?
    • Omdat de invoer altijd eerst verkeerd is
    • Omdat invoer kleinere bestanden zijn
    • Omdat ground-truth-labels vaak veel later arriveren dan de voorspellingen
    • Omdat modellen labels volledig negeren
  4. What does a two-sample Kolmogorov-Smirnov test compare?
    • The average accuracy of two classifiers only
    • The class labels predicted by a single model
    • The parameter values of two neural networks
    • The empirical cumulative distribution functions of two samples
  5. Welk scenario is een duidelijk voorbeeld van conceptdrift?
    • Wat gebruikers als 'spam' beschouwen, verandert in de loop van de tijd, zelfs voor e-mails die er hetzelfde uitzien
    • Een camera produceert iets helderdere beelden
    • De leeftijden van klanten in de dataset blijven hetzelfde
    • De dataset wordt opgeslagen in een nieuw bestandsformaat
  6. What is a safe first response when an input-drift monitor triggers?
    • Automatically deploy a newly retrained model without evaluation
    • Investigate the data and impact, then decide whether retraining or another action is justified
    • Delete the reference data
    • Assume every shift is harmful concept drift
  7. What can TensorFlow Data Validation check in an ML pipeline?
    • The causal effect of a feature
    • Whether every model prediction is correct
    • Data schemas and statistics, including unexpected changes
    • The absolute accuracy of an unlabeled dataset
  8. What does the Population Stability Index (PSI) measure in a drift-monitoring setup?
    • The model’s accuracy on labeled examples
    • A causal effect of an input feature
    • A universal pass/fail threshold for all models
    • A numerical summary of how binned feature distributions differ between reference and current data