Quiz połączony z przewodnikiem · Ciężko Poziom

Automatyczna szybka optymalizacja i quiz DSPy

Przetestuj swoją wiedzę na temat oceniania podpowiedzi w odniesieniu do metryki, sposobu wyszukiwania instrukcji przez APE i OPRO oraz działania sygnatur i optymalizatorów DSPy.

Powiązane ścieżki prowadząceAutomatyczna szybka optymalizacja i Dspy
Pytanie 1 z 8

Co musisz podać, aby automatyczna optymalizacja natychmiastowa zadziałała?

Podgląd każdego pytania8 pytania

Odpowiedzi i wyjaśnienia pojawiają się w miarę rozwiązywania quizu.

  1. Co musisz podać, aby automatyczna optymalizacja natychmiastowa zadziałała?
    • Tylko dłuższy monit
    • Zadanie, zestaw przykładowych danych wejściowych i metryka do oceny wyników
    • Dopracowany model i klaster GPU
    • Lista zakazanych słów
  2. Co w OPRO pełni rolę optymalizatora?
    • Stopień opadania gradientowego na ciężarkach modelu
    • Szybki inżynier ludzki
    • Losowe wyszukiwanie bez informacji zwrotnej
    • LLM otrzymał meta-podpowiedź z listą wcześniejszych instrukcji i ich wyników
  3. Co ilustruje wynik OPRO „Weź głęboki oddech i pracuj nad tym problemem krok po kroku”?
    • Zoptymalizowane sformułowania mogą być nieintuicyjne i specyficzne dla modelu
    • Instrukcje dotyczące oddychania działają dla każdego modelu
    • Zadania matematyczne nie wymagają podpowiedzi
    • OPRO działa tylko przy zadaniach pisemnych
  4. Co to jest podpis DSPy?
    • Klucz kryptograficzny dla interfejsu API
    • Numer wersji modelu
    • Deklaracja danych wejściowych i wyjściowych kroku, taka jak „pytanie, kontekst -> odpowiedź”
    • Znak wodny na wygenerowanym tekście
  5. W jaki sposób BootstrapFewShot DSPy uzyskuje swoje demonstracje?
    • Pobiera przykłady z Internetu
    • Uruchamia program na podstawie danych wejściowych szkoleniowych i przechowuje ślady przejść metryki
    • Prosi użytkownika o oznaczenie każdego etapu pośredniego
    • Używa najdłuższych dostępnych przykładów
  6. Dlaczego podczas optymalizacji podpowiedzi należy zachować oddzielny zestaw?
    • Aby zmniejszyć rozmiar podpowiedzi
    • Aby optymalizator działał szybciej
    • Jest to wymagane przez API
    • Aby sprawdzić, czy zoptymalizowany monit nie przerósł przykładów szkoleniowych
  7. Jak wcześniej nazywały się optymalizatory DSPy?
    • Telepromptery
    • Kompilatory
    • Tokenizatory
    • Retrievery
  8. Jakie podejście zastosował APE (automatyczny inżynier podpowiedzi)?
    • Dostosowano wagę modelu zgodnie z instrukcjami
    • Pisał odręcznie podpowiedzi z wywiadów z ekspertami
    • Miał model proponujący instrukcje na podstawie przykładów wejścia-wyjścia i zachowywał te najwyżej punktowane
    • Całkowicie usunął instrukcje