Útmutatóhoz kapcsolódó kvíz · Közepes Szint
Maradék hálózatok kvíz
Review residual-block computation, identity shortcuts, gradient paths, ImageNet-era depth, and how residuals recur in neural architectures.
kérdés 1 -ból 8
Milyen problémát oldottak meg konkrétan a maradék kapcsolatok?
Tekintse meg az összes kérdést8 kérdéseket
A válaszok és magyarázatok megjelennek a kvíz kitöltésekor.
- Milyen problémát oldottak meg konkrétan a maradék kapcsolatok?
- A mélyebb sík hálózatok rosszabbul edznek, mint a sekélyebbek (degradáció)
- A képek túl alacsony felbontásúak
- Hiány van a címkézett edzésadatokból
- A GPU-kból kifogy a memória
- What does a basic residual block compute when input and output dimensions match?
- Multiplies the input by itself
- Adds the block’s learned residual function to its input, y = F(x) + x
- Drops the input and returns zero
- Sorts input channels alphabetically
- Miért segítik a kihagyott kapcsolatok a gradienseket edzés közben?
- They eliminate the need to train weights
- They force every layer to output zero
- They provide an additional direct path for gradient flow around the learned transformation
- They make deep networks immune to all optimization problems
- How deep was the deepest ResNet evaluated in the original ImageNet paper?
- 18 layers
- 34 layers
- 50 layers
- 152 réteg
- Ha egy maradék blokk rétegei megtanulják, hogy F(x) = 0, mit csinál a blokk?
- Hatékonyan változatlanul továbbítja a bemenetet (identitás)
- Nullát ad ki és megszakítja a hálózatot
- Megduplázza a bemenetet
- Véletlenszerűvé teszi a kimenetet
- What residual connection does the Transformer paper describe around attention and feed-forward sublayers?
- Replace the sublayer input with a class label
- Add each sublayer’s output to the sublayer input through a residual connection
- Average every token globally at the output only
- Remove the residual stream after self-attention
- When a residual block changes channel dimensions, what can a projection shortcut do?
- Convert the input into a text sequence
- Remove the residual branch
- Map the shortcut input to the dimensions required for addition
- Guarantee that every gradient has unit magnitude
- What sequence of convolutions defines the original ResNet bottleneck block?
- Three 3×3 convolutions only
- A 3×3 convolution followed by two fully connected layers
- A pooling layer followed by two transposed convolutions
- A 1×1, then 3×3, then 1×1 convolution