引导式测验 · 中等 等级

即时注入攻击测验

通过工具遏制、层次结构培训、任务中断和多模式输入风险,审查指令信任边界和间接注入。

相关引导路径即时注入攻击
问题 1 的 8

提示注入尝试可以利用哪种信任失效?

预览每个问题8 问题

当您参加测验时,就会出现答案和解释。

  1. 提示注入尝试可以利用哪种信任失效?
    • 任务材料中的对抗性指令被视为权威命令并被遵循
    • 要求每个模型加密其整个上下文
    • 保证所有模型拥有管理员权限
    • 要求每个模型始终服从每一次输入
  2. 间接提示注入与直接注入有何不同?
    • 它仅适用于图像模型
    • 它需要对服务器的物理访问
    • 恶意指令存在于模型稍后读取的外部源中,而不是用户自己的消息中
    • 这是开发商故意为之
  3. 所引用的间接注入分类法包含哪种可用性目标?
    • 仅在每次攻击中窃取整个训练语料库
    • 抑制有用回答或破坏搜索任务
    • 仅更改GPU的物理内存大小
    • 仅改进所有授权的搜索结果
  4. 最小权限工具权限如何限制成功注入的后果?
    • 它们证明所有允许的操作在任何上下文中都是无害的
    • 它们保证模型永不提出注入动作
    • 它们消除了任何输出或动作验证的需要
    • 它们限制工作流可用的操作和资源
  5. 指令层级研究旨在训练哪种行为?
    • 按字母顺序排序所有检索到的单词
    • 将每个网页视为比开发者更具权威性
    • 在冲突的低优先级内容中优先遵循特权指令
    • 使用图像密钥加密模型词汇表
  6. 为什么随着人工智能代理获得工具,即时注入变得更加危险?
    • 受骗的代理现在可以采取实际行动,例如发送电子邮件、运行代码或泄露数据
    • 代理使用工具运行速度更慢
    • 工具使模型忘记其训练
    • 工具使模型的困惑度加倍
  7. 为什么当应用接受多模态输入时,prompt-injection 评估应该覆盖图像?
    • 图像保证所有指令都是可信的
    • 图像只能包含一个数值标量
    • 纯文本测试自动覆盖所有图像输入
    • 对抗性指令可以嵌入图像通道
  8. 仅引用攻击指令不足以证明应用已被破坏吗?
    • 每个引用的字符串必然改变系统权限
    • 文本可能是合法的分析材料,且永远不会被执行为指令
    • 攻击者必须先修改所有原始模型权重
    • 没有授权用户可以讨论安全攻击