Quiz połączony z przewodnikiem · Średni Poziom
Quiz dotyczący nauczania w ramach programu nauczania
Oceń porządek programów nauczania, artykuł Bengio z 2009 r., uczenie się we własnym tempie, hipotezy dotyczące optymalizacji i przeciwdziałanie programowi nauczania. Sprawdź założenia i zakres.
Pytanie 1 z 8
What ordering does a common curriculum-learning strategy use?
Podgląd każdego pytania8 pytania
Odpowiedzi i wyjaśnienia pojawiają się w miarę rozwiązywania quizu.
- What ordering does a common curriculum-learning strategy use?
- Present examples from easier to harder according to a chosen schedule
- Always present the most difficult example first
- Sort examples alphabetically and never change the order
- Use only examples that already have perfect predictions
- Kto wprowadził termin „uczenie się w ramach programu nauczania” w dobrze znanym artykule z 2009 roku?
- Geoffreya Hintona
- Yoshua Bengio i współpracownicy
- Andrzej Ng
- Yanna LeCuna
- Kto w przypadku uczenia się we własnym tempie decyduje, które przykłady uznają za wystarczająco „łatwe” do przeszkolenia na wczesnym etapie?
- Ludzki komentator oznacza trudności ręcznie
- Harmonogram sprzętowy
- Sam model, na podstawie którego przykłady mają niskie straty
- Tylko oddzielny, wstępnie przeszkolony klasyfikator trudności
- Dlaczego program nauczania może pomóc w optymalizacji?
- Automatycznie zwiększa tempo uczenia się
- Gwarantuje zerowy błąd szkolenia
- Eliminuje to potrzebę funkcji straty
- Wygładza początkowe cele, pomagając uniknąć słabych lokalnych minimów
- How should a team test whether an easy-to-hard curriculum helps a model?
- Compare against a suitable baseline with the same data and compute budget
- Assume it helps whenever the schedule has more stages
- Measure training loss once and skip held-out evaluation
- Compare runs that use different data and different compute
- Na czym polega uczenie się „poza programem nauczania”?
- Trening bez żadnych przykładów
- Przedstawiamy trudniejsze przykłady przed łatwiejszymi
- Używanie wyłącznie danych walidacyjnych
- Wyłączanie propagacji wstecznej
- Which four tasks did the 2010 self-paced learning paper report in its experiments?
- Speech translation, protein folding, weather prediction, and music synthesis
- Image captioning, game playing, robotics, and medical diagnosis
- Object localization, noun-phrase coreference, motif finding, and handwritten-digit recognition
- Clustering, sentiment analysis, machine translation, and speech diarization
- How can a curriculum be defined reproducibly?
- Use the word “easy” without a criterion
- Change the test set after each epoch
- Select only examples the model already predicts correctly
- Specify the example difficulty measure, ordering or schedule, and comparison baseline