Gids-gekoppelde quiz · Middelmatig Niveau

Temperatuur- en bemonsteringsquiz

Test logit-temperatuurschaling, hebzuchtige decodering, top-k- en kernkandidaatfilters, numerieke grenswaarden en de grenzen van voorspelbare generatie.

Gerelateerde gidspadenTemperatuur en bemonstering
Vraag 1 van 8

Wat doet het verhogen van de temperatuur met de output van een model?

Bekijk elke vraag8 vragen

Antwoorden en uitleg verschijnen terwijl je de quiz doet.

  1. Wat doet het verhogen van de temperatuur met de output van een model?
    • Maakt het deterministischer en repetitiever
    • Verandert permanent de gewichten van het model
    • Schakelt de softmax-functie uit
    • Maakt het willekeuriger en gevarieerder, met meer kans op ongebruikelijke tokens
  2. Vóór de bemonstering worden de onbewerkte tokenscores (logits) van het model omgezet in waarschijnlijkheden door:
    • Het top-k-filter
    • De softmax-functie
    • Terugpropagatie
    • De tokenizer
  3. What determines the candidate set in top-p sampling, compared with top-k?
    • Top-p always keeps exactly ten tokens
    • Both methods always keep every vocabulary token
    • Top-p uses the smallest leading set reaching a cumulative probability threshold; top-k uses a count
    • Top-k uses a cumulative threshold while top-p uses a fixed count
  4. Wat doet temperatuur mechanisch gezien met de logits?
    • Verdeelt elke logit door T vóór softmax
    • Voegt een willekeurig getal toe aan elke logit
    • Verwijdert de laagste logits
    • Vermenigvuldigt de uiteindelijke kansen met T
  5. For a structured-data task, what does choosing more predictable token selection fail to establish?
    • That a decoding setting was chosen
    • That the generated content is correct or valid
    • That token scores can be compared
    • That a model can produce an output
  6. How does greedy decoding choose the next token?
    • It literally divides every logit by zero
    • It uniformly samples every vocabulary token
    • It permanently retrains the model
    • It selects a highest-scoring eligible token rather than sampling
  7. Two token logits differ by six before temperature scaling. With positive temperature two, what is their scaled difference?
    • Drie
    • Twelve
    • Zes
    • Nul
  8. For probabilities 0.55, 0.30, 0.10, and 0.05, how many leading tokens does top-p 0.80 keep?
    • Eén
    • Drie
    • Twee
    • Vier