ガイド連動クイズ · ハード レベル
関数ベクトルとタスク表現に関するクイズ
関数ベクトルがどのようにアテンション ヘッドから抽出され、隠れ状態に注入され、タスク コンテキスト全体でテストされるかを研究します。
質問 1 の 8
What does a function vector represent in the studied language models?
すべての質問をプレビューする8 質問
クイズに答えると、答えと解説が表示されます。
- What does a function vector represent in the studied language models?
- A compact activation-space representation associated with a demonstrated task
- The model’s full weight matrix
- A single token embedding in every setting
- The optimizer’s learning rate
- 関数ベクトルは通常どのように構築されるのでしょうか?
- 語彙内のすべての単語の埋め込みを合計することによって
- 特定のタスクを実行する出力を平均化することで、プロンプト例よりも注意を向けることができます。
- 1 つの例でモデルを微調整することによって
- 最終的なソフトマックス確率を読み取ることによって
- What did the function-vector paper observe after injecting a vector into a zero-shot prompt?
- The model always crashed
- It guaranteed correct answers on any task
- It could trigger the associated task in the tested settings
- It permanently changed the model weights
- 関数ベクトルを運ぶヘッドの発見を支える解析手法はどれですか?
- 損失の勾配降下
- ビームサーチ
- ドロップアウトの正則化
- 因果媒介分析
- What do function-vector experiments provide evidence for?
- Some models form reusable internal representations associated with tasks
- All language models only memorize text
- Every model has one universal task vector
- Tokenization alone determines every behavior
- Why are function vectors interesting to steering research?
- They guarantee safe or correct behavior
- They provide an activation-level intervention that can influence task behavior in tested settings
- They eliminate prompts for every application
- They make all model decisions fully transparent
- At what part of the transformer did the paper report strong function-vector effects?
- Only the input embedding table
- Only the final output logits
- Middle layers in the tested models
- トークナイザーの語彙
- What happened when researchers summed some function vectors?
- The vectors always canceled to zero
- The model’s weights were permanently updated
- Every possible task was composed perfectly
- Some combinations triggered new complex tasks in the tested experiments