引导式测验 · 硬 等级
最小贝叶斯风险解码测验
测试 MBR 解码的预期效用、采样伪参考、二次候选比较、度量限制和候选池约束。
问题 1 的 8
MBR 解码选择什么而不是单个最可能的序列?
预览每个问题8 问题
当您参加测验时,就会出现答案和解释。
- MBR 解码选择什么而不是单个最可能的序列?
- 相对于其他可能的输出具有最高预期效用的候选人
- 最短序列
- 随机样本
- 最长序列
- 既然无法获得真正的引用,MBR 使用什么作为伪引用呢?
- 固定的外部语料库
- 样本候选池输出本身
- 人工注释
- 训练集
- 为什么朴素 MBR 的计算成本很高?
- 需要重新训练模型
- 需要更大的词汇量
- N 个候选者的成对比较是 O(N 平方) 度量调用
- 它不使用 GPU
- 在最小贝叶斯风险机器翻译实验中,COMET 被用于什么?
- As a universal guarantee of better translation quality
- As a tokenizer for the candidate pool
- As an exact reference translation available at inference
- As a learned utility metric in evaluated translation settings
- 推理的自洽性与 MBR 相关,因为它:
- 对许多连锁店进行抽样并选择最受认可的答案
- 始终采用第一个采样答案
- 内部使用集束搜索
- 忽略模型的分布
- 在最小贝叶斯风险决策中,风险通常如何表达?
- Always one minus a normalized similarity score
- Expected loss under a chosen loss function and reference distribution
- The model’s parameter count divided by accuracy
- The number of candidates sampled
- If the chosen utility metric disagrees with human judgments, what will MBR primarily optimize?
- Human preference automatically overrides the metric
- The model’s raw next-token likelihood
- The expected utility under that selected metric
- The shortest candidate in the pool
- If a high-quality answer is missing from the sampled candidate pool, what can MBR do?
- It guarantees the missing answer is generated
- It changes the model weights to add the answer
- It replaces the utility metric with a human reference
- It can only select or rerank candidates that are in the pool