Quiz collegato alla guida · Medio Livello

Quiz sul punteggio di Brier

Esercitati nei calcoli del punteggio Brier, nella calibrazione delle probabilità e nei confronti di base utilizzando previsioni di consegna e risultati binari.

Percorsi guida correlatiPunteggio Brier
Domanda 1 di 8

Un pacco ha il 70% di probabilità di arrivare in ritardo ed è in ritardo. Quale perdita binaria di Brier segue dalla formula della guida?

Anteprima di ogni domanda8 domande

Le risposte e le spiegazioni vengono visualizzate mentre rispondi al quiz.

  1. Un pacco ha il 70% di probabilità di arrivare in ritardo ed è in ritardo. Quale perdita binaria di Brier segue dalla formula della guida?
    • 0,30
    • 0,09
    • 0,49
    • 0,70
  2. Per i due lotti con perdite di 0,04 e 0,09, quale calcolo produce il loro punteggio Brier combinato?
    • Aggiungi le perdite per ottenere 0,13
    • Sottrarre le perdite per ottenere 0,05
    • Prendiamo la perdita maggiore, 0,09
    • Media delle perdite per ottenere 0,065
  3. Un modello di consegna segnala le probabilità di ritardo, ma la colonna dei risultati utilizza 1 per la consegna puntuale. Cosa dovrebbe risolvere per primo il valutatore?
    • Fai in modo che la probabilità e il risultato si riferiscano allo stesso evento
    • Arrotonda tutte le probabilità ai numeri interi
    • Utilizzare solo i pacchi previsti in ritardo
    • Sostituisci la media con la perdita maggiore
  4. Perché il punteggio Brier di un modello può migliorare senza che la sua calibrazione migliori?
    • Il punteggio ignora le probabilità previste
    • Il punteggio premia sempre una maggiore fiducia
    • Anche una migliore separazione dei gruppi a rischio può migliorare il punteggio
    • La calibrazione influisce solo sulle previsioni multiclasse
  5. Quando le escalation sono rare, quale confronto rende più informativo il basso punteggio Brier di un modello di ticket?
    • Confrontandolo con un modello valutato su un diverso tasso di eventi
    • Confrontandolo con una linea di base a tasso costante sugli stessi biglietti
    • Confrontando solo i biglietti la cui probabilità prevista supera 0,5
    • Confrontando solo le percentuali di etichette corrette dei modelli
  6. Quale parte della scomposizione classica di Brier dipende dal tasso complessivo degli eventi?
    • Affidabilità
    • Risoluzione
    • La differenza tra affidabilità e risoluzione
    • Incertezza
  7. Perché un valutatore dovrebbe mantenere 0,6 e 0,9 invece di convertire entrambe le previsioni di consegna nell'etichetta "in ritardo" prima di assegnare il punteggio?
    • L'arrotondamento rimuove le informazioni sulla confidenza valutate dal punteggio Brier
    • La soglia preserva tutte le informazioni sulla probabilità necessarie per il punteggio
    • L'arrotondamento rende il punteggio una misura diretta della calibrazione della probabilità
    • Soltanto le previsioni superiori alla soglia devono essere mantenute
  8. Due report software utilizzano convenzioni Brier binarie e multiclasse diverse. Quale dettaglio deve essere controllato prima di confrontare i loro numeri?
    • Se entrambi i report utilizzano la stessa soglia di classificazione
    • Se entrambi i modelli hanno la stessa precisione
    • La normalizzazione del punteggio e l'ordinamento delle classi
    • Indica se ciascuna classe riceve lo stesso numero di previsioni