Тест за конформерна архитектура

Отговорите и обясненията се появяват, докато отговаряте на теста.

1. Какви два механизма съчетава архитектурата Conformer в един блок?
   • Конволюция и самовнимание
   • Повторение и обединяване
   • Дървета на решенията и групиране
   • Beam търсене и токенизиране
2. Защо комбинирането на свиване и внимание е особено полезно за речта?
   • Вниманието обработва локалните детайли на фонемата, докато конволюцията обработва глобалния контекст
   • Конволюцията улавя локални модели, докато самовниманието улавя дългосрочен контекст
   • И двете имат значение само за изображения, не и за аудио
   • Нито едното не помага; това е чисто за скорост
3. Какво представлява структурата „макарон“ или сандвич на конформерния блок?
   • Два слоя внимание около една намотка
   • Само един слой за подаване напред
   • Внимание и конволюция, обвити между два полустъпкови модула за подаване напред
   • Намотка, подредена върху намотка
4. Коя организация въведе Conformer и през коя година?
   • OpenAI през 2018 г
   • Meta през 2015 г
   • Microsoft през 2012 г
   • Google през 2020 г
5. Какво обикновено включва модулът за навиване вътре в Conformer?
   • Точково преобразуване, GLU, преобразуване в дълбочина, нормализиране и Swish активиране
   • Само един напълно свързан слой
   • Повтаряща се LSTM клетка
   • Произволен класификатор на гори
6. On LibriSpeech test-clean/test-other, what WER did the original Conformer paper report with an external language model?
   • 2.1% / 4.3%
   • 1.9% / 3.9%
   • 9.1% / 9.3%
   • 0.1% / 0.3%
7. What positional information does the Conformer paper add to attention?
   • A geographic GPS coordinate for every speech frame
   • A fixed class label for each utterance
   • Relative positional encoding
   • A separate video frame index
8. What word error rates did the Conformer paper report without an external language model on LibriSpeech test/test-other?
   • 20.1% / 40.3%
   • 0.1% / 0.3%
   • 12.1% / 14.3%
   • 2.1% / 4.3%