Gids-gekoppelde quiz · Middelmatig Niveau

Nous Onderzoeksquiz

Ontdek de open assistenten van Nous Research, het afstemmen van voorkeuren, de DeMo-communicatiemethoden en het gedistribueerde trainingsproject van Psyche.

Gerelateerde gidspadenNous Onderzoek
Vraag 1 van 8

Waar is Nous Research het meest bekend om in zijn vroege opkomst op de voorgrond?

Bekijk elke vraag8 vragen

Antwoorden en uitleg verschijnen terwijl je de quiz doet.

  1. Waar is Nous Research het meest bekend om in zijn vroege opkomst op de voorgrond?
    • Verfijning van open basismodellen in de Hermes-assistentserie
    • Productie van AI-chips
    • Het runnen van een cloudgameservice
    • Vanaf het begin close-source frontier-modellen bouwen
  2. Welke basismodellen heeft Nous het meest verfijnd?
    • Google's PaLM en Gemini
    • De Llama- en Mistral-modellen van Meta
    • OpenAI's GPT-4
    • IBM Watson
  3. What problem does Nous Research’s DisTrO project address?
    • Het genereren van realistische beelden
    • Videobestanden comprimeren
    • Het verminderen van de communicatiebandbreedte die nodig is voor gedistribueerde training
    • Spam-e-mails detecteren
  4. Wat is het Psyche-netwerk?
    • Een sociaal mediaplatform
    • Een maatstaf voor het meten van redeneringen
    • Een soort aandachtsmechanisme
    • Een poging om modellen te trainen op geografisch verspreide, met internet verbonden hardware
  5. Welke techniek gebruikt Nous doorgaans om zijn verfijnde modellen op elkaar af te stemmen?
    • Begeleide verfijning plus voorkeursoptimalisatie zoals DPO op samengestelde gegevens
    • Volledig trainen met willekeurige gewichten zonder basismodel
    • Alleen handschriftregels zonder te leren
    • Versterking leren van onbewerkte pixels
  6. What does the name DeMo stand for in Nous Research's distributed-training work?
    • Distributed Model Orchestration
    • Decoupled Momentum Optimization
    • Decoder-Mixture Operation
    • Deterministic Memory Offload
  7. According to the DeMo paper, which training state need not be fully synchronized between accelerators?
    • The text prompts used for evaluation
    • The vocabulary definitions in the tokenizer
    • The complete optimizer states and model parameters
    • The labels used to evaluate image classifiers
  8. Which three roles does Psyche's training system assign?
    • A tokenizer, a rendering engine, and a search index
    • An underwriter, an auditor, and a policyholder
    • A browser, an operating system, and a GPU driver
    • A coordinator, training clients, and a data provider