Kvíz spojený s průvodcem · Střední úroveň
Kvíz modelů Falcon
Kontroluje vývojář Falconu, RefinedWeb, pozornost při více dotazech, variantu Mamba a roli suverénních snah o model nadace.
Otázka 1 z 8
Která organizace vyvíjí modely Falcon?
Náhled každé otázky8 otázky
Odpovědi a vysvětlení se zobrazují, jak budete v kvízu.
- Která organizace vyvíjí modely Falcon?
- Technologický inovační institut (TII) v Abu Dhabi
- Startup ze Silicon Valley
- Čínská akademie věd
- Evropské univerzitní konsorcium
- Co bylo pozoruhodného na datovém souboru RefinedWeb používaném k trénování raných modelů Falcon?
- Bylo to malé a ručně psané
- Byl vytvořen agresivním filtrováním a deduplikací webových dat namísto spoléhání se na upravené zdroje
- Obsahoval pouze obrázky
- Bylo to zcela syntetické
- Jakou techniku pozornosti používají modely transformátorů Falcon k úspoře paměti při odvození?
- Žádná pozornost
- Pouze plná kvadratická pozornost
- Vícedotazová pozornost
- Náhodná pozornost
- Jak se Falcon Mamba architektonicky liší od standardních modelů Falcon?
- Je to transformátor s více vrstvami
- Nemá žádnou neuronovou síť
- Provádí pouze klasifikaci obrázků
- Místo transformátoru používá stavový model
- Za jakých podmínek jsou modely Falcon obecně vydávány?
- Povolující výrazy povzbuzující komerční a výzkumné využití
- Přísně uzavřené a soukromé
- Dostupné pouze pro občany SAE
- Pouze jako placené API
- Falcon je často uváděn jako příklad jakého širšího trendu?
- Konec open-source umělé inteligence
- Země budují suverénní, domácí modely základů
- Modely, které fungují pouze offline
- Výměna všech GPU za CPU
- In multi-query attention, what do multiple query heads share?
- One shared query and separate keys for every token
- The same final vocabulary logits
- A single set of key and value projections
- A single attention score for all layers
- What does Falcon’s RefinedWeb training data illustrate?
- A state-space model needs no training text
- All web pages are equally reliable without filtering
- Synthetic data must always replace real text
- A large web corpus can be filtered and deduplicated rather than relying only on curated sources