Gids-gekoppelde quiz · Middelmatig Niveau
Quiz voor agentsteigers en harnassen
Test de agentloop en toolverzending, stopt regels en foutafhandeling, en ontdekt waarom hetzelfde model anders scoort op verschillende harnassen.
Vraag 1 van 8
Wat is een agentenharnas?
Bekijk elke vraag8 vragen
Antwoorden en uitleg verschijnen terwijl je de quiz doet.
- Wat is een agentenharnas?
- The model's neural network weights
- The code around a model that runs the loop, executes tools and decides when to stop
- A dataset for training agents
- Een type GPU
- Wat is een voorbeeld van een stopregel?
- Using a larger model
- A maximum number of steps or a cost budget
- Adding more tools
- Changing the font of outputs
- Wat benadrukte het SWE-agentproject?
- That models need no tools
- An agent-computer interface designed for models, with concise viewers and immediate feedback
- That bigger GPUs solve all agent problems
- Removing the loop entirely
- Waarom kan hetzelfde model in verschillende rapporten verschillend scoren op de SWE-bench?
- The benchmark changes every hour
- Scores reflect the model plus harness, tools, step limits and retry policy
- Models forget their training between runs
- Scores are randomly assigned
- Hoe moet een harnas doorgaans omgaan met een mislukte gereedschapsoproep?
- Crash the entire run immediately
- Return the error to the model as a tool result it can react to
- Silently ignore it
- Restart the computer
- What is the purpose of capping tool output size and marking truncation?
- To hide information from users
- To keep context manageable and let the model know to search or page for more
- To make tools run faster on the GPU
- To prevent the model from using tools
- When fairly comparing two models as agents, what should you hold constant?
- Only the model's name
- The harness, prompt, tools, step limit and retry policy
- Nothing; vary everything
- The date of the test only
- A harness pauses before large refund tool calls for human approval. What design principle does this show?
- Context compaction
- Gating side-effecting tools with permissions or confirmation
- Parallel function calling
- Embedding fine-tuning