Kuiz berkaitan panduan · Sederhana Tahap
Kuiz Sel Memori Jangka Pendek Panjang
Uji peranan get LSTM, pengekalan keadaan sel, kawalan input dan output, kemas kini aditif, aliran kecerunan dan had jujukan.
soalan 1 daripada 8
In a common modern three-gate LSTM variant, which gates regulate cell information and exposed output?
Pratonton setiap soalan8 soalan
Jawapan dan penjelasan muncul semasa anda mengambil kuiz.
- In a common modern three-gate LSTM variant, which gates regulate cell information and exposed output?
- Baca, tulis, dan laksanakan gerbang
- Mula, berhenti, dan jeda pintu
- Lupakan, pintu masuk dan keluar
- Encode, decode, dan attend gates
- What training difficulty was LSTM designed to mitigate?
- Terlalu banyak parameter untuk disimpan
- Vanishing gradients during learning over long sequences
- Ketidakupayaan untuk menggunakan GPU
- Kekurangan fungsi pengaktifan
- Siapa yang memperkenalkan LSTM, dan pada tahun berapa?
- Vaswani dan rakan sekerja pada 2017
- Rumelhart dan Hinton pada tahun 1986
- LeCun dan Bengio pada tahun 2012
- Hochreiter dan Schmidhuber pada tahun 1997
- In a common LSTM cell update, why can the additive cell-state path help gradient flow?
- It reduces reliance on repeated multiplicative transformations across time steps
- Ia mendarabkan keadaan dengan bilangan yang besar setiap langkah
- Ia memadamkan keadaan setiap langkah
- Ia membekukan semua beban semasa latihan
- Apakah fungsi pengaktifan yang biasanya digunakan oleh gerbang LSTM untuk bertindak sebagai suis hidup/mati lembut?
- ReLU, mengeluarkan 0 kepada infiniti
- Softmax atas perbendaharaan kata
- Fungsi langkah mengeluarkan tepat 0 atau 1
- Sigmoid, mengeluarkan 0 hingga 1
- Mengapakah Transformers sebahagian besarnya menggantikan LSTM untuk pemodelan bahasa berskala besar?
- Transformer tidak boleh mengendalikan teks sama sekali
- LSTM tidak memerlukan latihan
- Transformer selari merentasi jujukan dan menangkap konteks jarak jauh melalui perhatian
- Transformer menggunakan jumlah yang jauh lebih sedikit
- If an LSTM forget gate is near one and its input gate near zero, what happens to the cell state?
- It largely retains the previous state
- It is forced to zero
- It becomes the raw input token
- It must reverse the sequence
- Which gate controls how much of an LSTM cell’s stored state is exposed as output?
- The forget gate alone
- The output gate
- The optimizer momentum term
- The positional encoding gate