Quiz collegato alla guida · Medio Livello
Quiz sul punteggio di Brier
Esercitati nei calcoli del punteggio Brier, nella calibrazione delle probabilità e nei confronti di base utilizzando previsioni di consegna e risultati binari.
Domanda 1 di 8
Un pacco ha il 70% di probabilità di arrivare in ritardo ed è in ritardo. Quale perdita binaria di Brier segue dalla formula della guida?
Anteprima di ogni domanda8 domande
Le risposte e le spiegazioni vengono visualizzate mentre rispondi al quiz.
- Un pacco ha il 70% di probabilità di arrivare in ritardo ed è in ritardo. Quale perdita binaria di Brier segue dalla formula della guida?
- 0,30
- 0,09
- 0,49
- 0,70
- Per i due lotti con perdite di 0,04 e 0,09, quale calcolo produce il loro punteggio Brier combinato?
- Aggiungi le perdite per ottenere 0,13
- Sottrarre le perdite per ottenere 0,05
- Prendiamo la perdita maggiore, 0,09
- Media delle perdite per ottenere 0,065
- Un modello di consegna segnala le probabilità di ritardo, ma la colonna dei risultati utilizza 1 per la consegna puntuale. Cosa dovrebbe risolvere per primo il valutatore?
- Fai in modo che la probabilità e il risultato si riferiscano allo stesso evento
- Arrotonda tutte le probabilità ai numeri interi
- Utilizzare solo i pacchi previsti in ritardo
- Sostituisci la media con la perdita maggiore
- Perché il punteggio Brier di un modello può migliorare senza che la sua calibrazione migliori?
- Il punteggio ignora le probabilità previste
- Il punteggio premia sempre una maggiore fiducia
- Anche una migliore separazione dei gruppi a rischio può migliorare il punteggio
- La calibrazione influisce solo sulle previsioni multiclasse
- Quando le escalation sono rare, quale confronto rende più informativo il basso punteggio Brier di un modello di ticket?
- Confrontandolo con un modello valutato su un diverso tasso di eventi
- Confrontandolo con una linea di base a tasso costante sugli stessi biglietti
- Confrontando solo i biglietti la cui probabilità prevista supera 0,5
- Confrontando solo le percentuali di etichette corrette dei modelli
- Quale parte della scomposizione classica di Brier dipende dal tasso complessivo degli eventi?
- Affidabilità
- Risoluzione
- La differenza tra affidabilità e risoluzione
- Incertezza
- Perché un valutatore dovrebbe mantenere 0,6 e 0,9 invece di convertire entrambe le previsioni di consegna nell'etichetta "in ritardo" prima di assegnare il punteggio?
- L'arrotondamento rimuove le informazioni sulla confidenza valutate dal punteggio Brier
- La soglia preserva tutte le informazioni sulla probabilità necessarie per il punteggio
- L'arrotondamento rende il punteggio una misura diretta della calibrazione della probabilità
- Soltanto le previsioni superiori alla soglia devono essere mantenute
- Due report software utilizzano convenzioni Brier binarie e multiclasse diverse. Quale dettaglio deve essere controllato prima di confrontare i loro numeri?
- Se entrambi i report utilizzano la stessa soglia di classificazione
- Se entrambi i modelli hanno la stessa precisione
- La normalizzazione del punteggio e l'ordinamento delle classi
- Indica se ciascuna classe riceve lo stesso numero di previsioni