Gids-gekoppelde quiz · Gemakkelijk Niveau

Modelkaarten en datasheets voor datasetsquiz

Test wat er in modelkaarten en datasheets staat, waarom uitgesplitste evaluatie belangrijk is en hoe de EU AI Act AI-documentatie vereist.

Vraag 1 van 8

Wat is het hoofddoel van een modelkaart?

Bekijk elke vraag8 vragen

Antwoorden en uitleg verschijnen terwijl je de quiz doet.

  1. Wat is het hoofddoel van een modelkaart?
    • Om de beste benchmarkscore van een model te adverteren
    • Om het beoogde gebruik, de evaluatie en de prestaties van een model onder alle omstandigheden en beperkingen te documenteren
    • Om de gewichten van het model op te slaan
    • Licentie verlenen aan een model voor commerciële verkoop
  2. Wie leidde de krant die modelkaarten voorstelde?
    • Geoffrey Hinton
    • Fei-Fei Li
    • Margaret Mitchell
    • Yann LeCun
  3. Wat is gedesaggregeerde evaluatie?
    • Prestaties afzonderlijk rapporteren voor relevante subgroepen en aandoeningen
    • Het middelen van alle testresultaten tot één score
    • Evaluatiegegevens uit het model verwijderen
    • Alleen testen op synthetische data
  4. Datasheets for Datasets ontleent zijn idee aan welk vakgebied?
    • Farmaceutische etikettering
    • Restaurantmenu's
    • Financiële controle
    • Gegevensbladen voor elektronische componenten
  5. Waarin verschilt een systeemkaart van een basismodelkaart?
    • Het heeft alleen betrekking op de trainingsgegevens
    • Het documenteert een volledig geïmplementeerd systeem, inclusief veiligheidstests en mitigaties
    • In de VS is dit wettelijk verplicht
    • Het bevat de broncode
  6. Waar bevindt zich op Hugging Face een modelkaart?
    • In een aparte PDF
    • In het modelgewichtenbestand
    • In README.md van de repository met een YAML-metagegevensheader
    • In een privédatabase kan alleen personeel dit zien
  7. Welke vereiste van de EU AI-wet heeft betrekking op aanbieders van AI-modellen voor algemene doeleinden?
    • Publicatie van een samenvatting van de trainingsinhoud met behulp van een sjabloon van de Commissie
    • Alle gewichten publiekelijk loslaten
    • Het verkrijgen van een CE-markering voor elk chatbotantwoord
    • Elke gebruiker registreren
  8. Waarom is het een misvatting dat een modelkaart bewijst dat een model veilig is?
    • Modelkaarten worden altijd geschreven door toezichthouders
    • Modelkaarten kunnen geen statistieken bevatten
    • Modelkaarten zijn alleen voor afbeeldingsmodellen
    • Een modelkaart is een openbaarmaking, geen certificering, en kan onvolledig of verouderd zijn