Κουίζ που συνδέεται με οδηγό · Σκληρό Επίπεδο

Κουίζ για διανύσματα συναρτήσεων και αναπαραστάσεις εργασιών

Μελετήστε πώς τα διανύσματα συναρτήσεων εξάγονται από τις κεφαλές προσοχής, εισάγονται σε κρυφές καταστάσεις και δοκιμάζονται σε περιβάλλον εργασίας.

Ερώτηση 1 του 8

What does a function vector represent in the studied language models?

Προεπισκόπηση κάθε ερώτησης8 ερωτήσεις

Οι απαντήσεις και οι εξηγήσεις εμφανίζονται καθώς κάνετε το κουίζ.

  1. What does a function vector represent in the studied language models?
    • A compact activation-space representation associated with a demonstrated task
    • The model’s full weight matrix
    • A single token embedding in every setting
    • The optimizer’s learning rate
  2. Πώς κατασκευάζεται συνήθως ένα διάνυσμα συνάρτησης;
    • Αθροίζοντας όλες τις ενσωματώσεις λέξεων στο λεξιλόγιο
    • Με τον υπολογισμό του μέσου όρου των εξόδων συγκεκριμένων εργασιών, στρέφεται η προσοχή σε παραδείγματα προτροπών
    • Προσαρμόζοντας το μοντέλο σε ένα παράδειγμα
    • Διαβάζοντας τις τελικές πιθανότητες softmax
  3. What did the function-vector paper observe after injecting a vector into a zero-shot prompt?
    • The model always crashed
    • It guaranteed correct answers on any task
    • It could trigger the associated task in the tested settings
    • It permanently changed the model weights
  4. Ποια τεχνική ανάλυσης βασίζεται στην εύρεση των κεφαλών που φέρουν ένα διάνυσμα συνάρτησης;
    • Κλίση κατάβασης στην απώλεια
    • Αναζήτηση δέσμης
    • Τακτοποίηση εγκατάλειψης
    • Ανάλυση αιτιώδους διαμεσολάβησης
  5. What do function-vector experiments provide evidence for?
    • Some models form reusable internal representations associated with tasks
    • All language models only memorize text
    • Every model has one universal task vector
    • Tokenization alone determines every behavior
  6. Why are function vectors interesting to steering research?
    • They guarantee safe or correct behavior
    • They provide an activation-level intervention that can influence task behavior in tested settings
    • They eliminate prompts for every application
    • They make all model decisions fully transparent
  7. At what part of the transformer did the paper report strong function-vector effects?
    • Only the input embedding table
    • Only the final output logits
    • Middle layers in the tested models
    • Το λεξιλόγιο του tokenizer
  8. What happened when researchers summed some function vectors?
    • The vectors always canceled to zero
    • The model’s weights were permanently updated
    • Every possible task was composed perfectly
    • Some combinations triggered new complex tasks in the tested experiments