跳至内容
学习
新闻
工具
职位
使命
搜索
⌘K
English
捐赠
菜单
从这里开始
开始学习
学习
前往 学习
课程
指南
AI 导师
提示库
测验
认证
术语表
新闻
前往 新闻
最新人工智能新闻
主题跟踪器
研究和数据集
博客
编辑准则
更正说明
工具
前往 工具
工具目录
最佳名单
比较工具
成本计算器
快速精炼机
提交工具
职位
前往 职位
浏览人工智能职位
发布职位
赞助美亚保险
使命
前往 使命
使命
影响和统计
作者
帮助中心
有什么新消息
支持
捐赠
← 返回所有测验
引导式测验 • 硬 等级 • 6 问题
ZeRO 和分片优化器测验
测试您对 ZeRO 和分片优化器如何在大规模训练中削减冗余内存的理解。
相关引导路径
零优化器和分片优化器
问题 1 的 6
与普通数据并行相比,ZeRO 消除了哪些冗余?
需要提示吗?
A
每个 GPU 上的训练数据的重复副本
B
在每个 GPU 上复制优化器状态、梯度和参数的完整副本
C
节点之间的冗余网线
D
对同一批次重复前向传播