Gids-gekoppelde quiz · Moeilijk Niveau

Dubbele afdaling fenomeenquiz

Bekijk de dubbele afdaling nabij interpolatie en hoe het fenomeen kan variëren afhankelijk van de modelgrootte, de datasetgrootte en de trainingsduur.

Gerelateerde gidspadenFenomeen van dubbele afdaling
Vraag 1 van 8

Waar piekt de testfout doorgaans in de dubbele-dalingscurve?

Bekijk elke vraag8 vragen

Antwoorden en uitleg verschijnen terwijl je de quiz doet.

  1. Waar piekt de testfout doorgaans in de dubbele-dalingscurve?
    • Bij de interpolatiedrempel waar het model net aan alle trainingsgegevens voldoet
    • Helemaal aan het begin van de training met weinig parameters
    • Pas na miljarden parameters
    • Testfout piekt nooit; het valt monotoon
  2. Wat gebeurt er met de testfout als een model sterk overgeparameteriseerd raakt?
    • Het stijgt voor onbepaalde tijd als gevolg van overfitting
    • Het kan weer afnemen, vaak onder het klassieke minimum
    • Het blijft precies vlak
    • Het wordt willekeurig en onvoorspelbaar
  3. In which setting does the cited implicit-bias analysis characterize a minimum-norm solution?
    • Any neural network trained with gradient descent
    • Any model that reaches zero training error
    • A single-hidden-layer linear network under stated gradient-flow and initialization assumptions
    • A model trained without an optimization objective
  4. 'Epoch-wise' dubbele afdaling verwijst naar het effect dat verschijnt als een functie van wat?
    • Het aantal gebruikte GPU's
    • Alleen het leertemposchema
    • De grootte van de testset
    • Trainingstijd (aantal tijdperken)
  5. Welk klassiek idee daagt dubbele afkomst uit?
    • De U-vormige afweging tussen bias en variantie
    • Terugpropagatie
    • Stochastische gradiëntafdaling
    • De kettingregel
  6. Wie heeft in 2019 geholpen bij het populariseren en formaliseren van de dubbele-dalingscurve?
    • Newton en Leibniz
    • Belkin, Hsu, Ma en Mandal
    • Turing en Kerk
    • Alleen anonieme Kaggle-concurrenten
  7. Which model families did OpenAI report studying in its deep double-descent experiments?
    • Only decision trees and linear regression
    • Only recurrent speech recognizers
    • Convolutional neural networks, ResNets, and transformers
    • Only graphical game generators
  8. Besides model size and training duration, which axis can also show double-descent behavior?
    • Font size in a report
    • The number of words in a product name
    • The screen resolution of a monitor
    • Training dataset size