Quiz collegato alla guida · Difficile Livello

Quiz sulla calibrazione della fiducia nell'intelligenza artificiale

Verifica la calibrazione della probabilità, le differenze di accuratezza, i dati spostati, la visualizzazione delle prove, la fiducia dell'utente e la guida rivedibile.

Domanda 1 di 8

Cosa descrive la calibrazione statistica?

Anteprima di ogni domanda8 domande

Le risposte e le spiegazioni vengono visualizzate mentre rispondi al quiz.

  1. Cosa descrive la calibrazione statistica?
    • Se agli utenti piace l'interfaccia
    • Se il modello classifica correttamente ogni esempio
    • Quanto spesso il modello si spiega da solo
    • Se le probabilità previste corrispondono alle frequenze osservate in casi comparabili
  2. Un modello calibrato statisticamente può ancora funzionare male?
    • No, la calibrazione garantisce un'elevata precisione
    • Sì; la calibrazione e la qualità dell'attività sono proprietà diverse
    • Solo se gli utenti diffidano
    • No, se viene mostrata la sua fiducia
  3. Cosa stabilisce l’affermazione verbale di un modello “Sono sicuro al 95%”?
    • Solo che ha prodotto quelle parole; la fiducia necessita di una valutazione empirica
    • Che il suo output sia calibrato
    • Che le prove della fonte siano corrette
    • Che un essere umano non dovrebbe rivederlo
  4. Un modello è calibrato su un set di dati. Cosa rimane incerto dopo uno spostamento di dominio?
    • Se esiste il vecchio punteggio del test
    • Se tutti gli utenti sono d'accordo con il sistema
    • Se la calibrazione è ancora valida in caso di modifica della lingua, del dominio o dell'attività
    • Se il colore dell'interfaccia è accessibile
  5. Quale funzionalità dell'interfaccia può supportare il controllo indipendente?
    • Utilizza un badge di fiducia decorativo senza misurazione
    • Mostra le fonti e le limitazioni pertinenti accanto alla risposta
    • Nascondi la fonte per ridurre il disordine
    • Dichiarare che il modello è sempre affidabile
  6. In che modo i team dovrebbero valutare la fiducia umana nel sistema?
    • Misura solo se gli utenti fanno clic su "accetta"
    • Supponiamo che le spiegazioni migliorino sempre la fiducia
    • Conta le parole sicure del modello
    • Verifica se le persone notano errori e utilizzano le sostituzioni in modo appropriato
  7. Perché distinguere l'accuratezza dalla calibrazione?
    • Precisione e calibrazione sono sinonimi
    • La calibrazione misura solo la latenza
    • Un modello può classificare correttamente i casi mentre le sue probabilità sono sistematicamente troppo alte o basse
    • Un punteggio calibrato non può essere sbagliato
  8. Cosa dovrebbe accadere quando la calibrazione misurata cambia nel tempo?
    • Aggiorna la guida utente e mantieni un percorso per segnalare errori o completare l'attività in un altro modo
    • Lascia l'interfaccia invariata per un tempo indefinito
    • Rimuovi tutte le fonti
    • Visualizza un valore di confidenza più preciso