Quiz collegato alla guida · Medio Livello
Quiz sulla generazione dei test di intelligenza artificiale
Valuta i limiti degli oracoli di test, i test di caratterizzazione, la generazione di test simbolici e tramite LLM, il fuzzing e le linee guida sulla copertura. Verifica i limiti pratici.
Domanda 1 di 8
Qual è il "problema oracolo" nella generazione dei test AI?
Anteprima di ogni domanda8 domande
Le risposte e le spiegazioni vengono visualizzate mentre rispondi al quiz.
- Qual è il "problema oracolo" nella generazione dei test AI?
- Conoscere il corretto output atteso per un dato input
- Generazione di input casuali sufficienti per eseguire il programma
- Connessione del test runner a un database
- Scegliere in quale linguaggio di programmazione eseguire il test
- Cosa implica un "test di caratterizzazione"?
- Il tempo di esecuzione più veloce possibile
- Il comportamento corrente del codice come linea di base di regressione
- Lo stile di codifica dell'autore originale
- Una prova matematica formale di correttezza
- What programming language did the TestPilot study implement and evaluate its LLM test-generation approach for?
- Ruggine
- Fortran
- JavaScript
- SQL only
- Uno dei principali rischi legati all’accettazione dei test generati dall’intelligenza artificiale senza revisione è che essi possano:
- Corri troppo lentamente per essere utile
- Elimina automaticamente il codice sorgente
- Lavora solo nei fine settimana
- Asserisci e congela i bug esistenti come se fossero corretti
- In che modo gli assistenti di test basati su LLM come Copilot producono in genere un test?
- Predicendo il codice di test dalla funzione e dal contesto circostante
- Dimostrando formalmente che il codice è corretto
- Misurando la temperatura della CPU
- Registrando lo schermo dello sviluppatore
- Il fuzzing guidato dalla copertura gestisce gli input casuali utilizzando:
- Valutazioni in stelle degli utenti
- Strumentazione del codice che misura quali rami sono stati colpiti
- La fase lunare
- Solo il nome del file
- What did the TestPilot evaluation report as its median statement and branch coverage?
- 100% statement and branch coverage on every package
- 0% statement coverage and 52.8% branch coverage
- 70.2% statement coverage and 52.8% branch coverage across its studied packages
- The paper did not measure code coverage
- What does mutation testing assess about a test suite?
- Whether every test uses the same name
- Whether a characterization test preserves all current behavior
- Whether the fuzzer can reach a branch without running tests
- Whether tests detect small, deliberate changes made to the program