引導式測驗 · 中等 等級
瓶頸架構測驗
檢查通道減少、運算節省、倒置殘差、低秩更新和瓶頸背後的共享維度限制。
問題 1 的 8
在 ResNet 瓶頸塊中,第一個 1x1 卷積的作用是什麼?
預覽每個問題8 問題
當您參加測驗時,就會出現答案和解釋。
- 在 ResNet 瓶頸塊中,第一個 1x1 卷積的作用是什麼?
- 減少3x3卷積之前的通道數
- 提高空間分辨率
- 應用最終分類
- 添加噪音以進行正則化
- 為什麼瓶頸會使深度網路的運算成本更低?
- 它刪除所有激活
- 它在較少的通道上執行昂貴的操作
- 它到處使用更大的內核
- 它跳過反向傳播
- 在自動編碼器中,瓶頸層主要決定:
- 優化器的選擇
- 影像檔案格式
- 輸入被壓縮了多少
- 批量大小
- MobileNetV2 使用瓶頸思想的哪種變體?
- 純池化瓶頸
- 反覆出現的瓶頸
- 完全沒有瓶頸
- 倒置殘餘瓶頸(先擴展再收縮)
- LoRA 如何將瓶頸原理應用於大型語言模型?
- 透過在權重更新中插入可訓練的低秩(窄)瓶頸
- 透過刪除注意力層
- 將所有權重加倍
- 透過量化為 1 位
- 典型的 ResNet 瓶頸塊遵循哪種通道模式?
- 寬寬寬寬
- 減少、處理、恢復(例如,256 到 64 到 256)
- 窄,寬,窄
- 每層隨機
- A ResNet block reduces 256 channels to 64 before its 3×3 convolution. Ignoring the 1×1 layers, what is the 3×3 layer’s approximate multiply-add cost relative to 256 channels?
- About one-quarter
- About one-half
- About one-sixteenth
- About four times as much
- An autoencoder uses a narrow latent code. What constraint does this impose on reconstruction?
- The encoder must preserve every input pixel exactly
- The network can no longer use learned weights
- The decoder must expand the latent code before encoding
- The decoder must reconstruct the input from a compressed representation