Quiz collegato alla guida · Difficile Livello
Quiz sulla calibrazione della fiducia nell'intelligenza artificiale
Verifica la calibrazione della probabilità, le differenze di accuratezza, i dati spostati, la visualizzazione delle prove, la fiducia dell'utente e la guida rivedibile.
Domanda 1 di 8
Cosa descrive la calibrazione statistica?
Anteprima di ogni domanda8 domande
Le risposte e le spiegazioni vengono visualizzate mentre rispondi al quiz.
- Cosa descrive la calibrazione statistica?
- Se agli utenti piace l'interfaccia
- Se il modello classifica correttamente ogni esempio
- Quanto spesso il modello si spiega da solo
- Se le probabilità previste corrispondono alle frequenze osservate in casi comparabili
- Un modello calibrato statisticamente può ancora funzionare male?
- No, la calibrazione garantisce un'elevata precisione
- Sì; la calibrazione e la qualità dell'attività sono proprietà diverse
- Solo se gli utenti diffidano
- No, se viene mostrata la sua fiducia
- Cosa stabilisce l’affermazione verbale di un modello “Sono sicuro al 95%”?
- Solo che ha prodotto quelle parole; la fiducia necessita di una valutazione empirica
- Che il suo output sia calibrato
- Che le prove della fonte siano corrette
- Che un essere umano non dovrebbe rivederlo
- Un modello è calibrato su un set di dati. Cosa rimane incerto dopo uno spostamento di dominio?
- Se esiste il vecchio punteggio del test
- Se tutti gli utenti sono d'accordo con il sistema
- Se la calibrazione è ancora valida in caso di modifica della lingua, del dominio o dell'attività
- Se il colore dell'interfaccia è accessibile
- Quale funzionalità dell'interfaccia può supportare il controllo indipendente?
- Utilizza un badge di fiducia decorativo senza misurazione
- Mostra le fonti e le limitazioni pertinenti accanto alla risposta
- Nascondi la fonte per ridurre il disordine
- Dichiarare che il modello è sempre affidabile
- In che modo i team dovrebbero valutare la fiducia umana nel sistema?
- Misura solo se gli utenti fanno clic su "accetta"
- Supponiamo che le spiegazioni migliorino sempre la fiducia
- Conta le parole sicure del modello
- Verifica se le persone notano errori e utilizzano le sostituzioni in modo appropriato
- Perché distinguere l'accuratezza dalla calibrazione?
- Precisione e calibrazione sono sinonimi
- La calibrazione misura solo la latenza
- Un modello può classificare correttamente i casi mentre le sue probabilità sono sistematicamente troppo alte o basse
- Un punteggio calibrato non può essere sbagliato
- Cosa dovrebbe accadere quando la calibrazione misurata cambia nel tempo?
- Aggiorna la guida utente e mantieni un percorso per segnalare errori o completare l'attività in un altro modo
- Lascia l'interfaccia invariata per un tempo indefinito
- Rimuovi tutte le fonti
- Visualizza un valore di confidenza più preciso