Test legat de ghid · Mediu Nivel
Chestionar pentru modele secvență-la-secvență
Learn how encoder-decoder models map input sequences to different-length outputs using attention and cross-attention mechanisms.
Întrebare 1 de 8
Care sunt cele două componente principale ale unui model secvență-la-secvență?
Previzualizează fiecare întrebare8 întrebări
Răspunsurile și explicațiile apar pe măsură ce susțineți testul.
- Care sunt cele două componente principale ale unui model secvență-la-secvență?
- Un encoder și un decodor
- Un tokenizer și un clasificator
- Două codificatoare identice
- Un filtru și un clasament
- Ce problemă cheie a rezolvat mecanismul atenției în modelele seq2seq?
- Tokenizare lentă
- Blocajul vectorial cu lungime fixă pentru intrări lungi
- Lipsa unui vocabular
- Date de antrenament excesive
- Ce arhitectură a folosit modelul original de traducere seq2seq din 2014?
- Rețele convoluționale
- Arbori de decizie
- LSTM-uri stivuite
- Straturi goale de alimentare înainte
- Cum construiește atenția contextul pentru fiecare pas de decodare?
- Făcând media tuturor jetoanelor de intrare în mod egal
- Ignorând în întregime codificatorul
- Prin copierea ultimului jeton de intrare
- Printr-o sumă ponderată a stărilor codificatorului folosind scorurile de aliniere
- De ce ieșirile seq2seq pot diferi ca lungime de intrări?
- Decodorul generează jetoane până când emite un semnal de oprire
- Intrările și ieșirile sunt întotdeauna de lungime egală
- Codificatorul plănuiește totul
- Lungimea este fixată în avans
- Ce modele moderne sunt arhitecturi populare seq2seq bazate pe Transformer?
- ResNet și VGG
- T5 și BART
- K-means și PCA
- Word2Vec și GloVe
- In encoder-decoder attention, which representations are commonly used as keys and values?
- Only the decoder’s future hidden states
- The vocabulary file’s byte offsets
- The encoder’s output representations
- The optimizer’s learning-rate history
- What does a bidirectional encoder provide to an attention-based decoder?
- A fixed one-token output regardless of the input
- A guarantee that output length equals input length
- A causal mask over future target tokens
- Contextual representations of source tokens that can use information from both directions