Termin ze słownika AI

Czym jest Próbkowanie z góry p (jądro).?

Definicja

Strategia dekodowania polegająca na próbkowaniu z najmniejszego zestawu tokenów, którego prawdopodobieństwa sumują się do p.

Przejrzyj pełny słownik AIPrzeglądaj wszystkie bezpłatne przewodniki AI

Powiązane terminy

Próbkowanie z góry kStrategia dekodowania, która pobiera próbki tylko z k najprawdopodobniej kolejnych tokenów.Strzeżone dekodowanieStrategia generowania, która ogranicza tokeny wyjściowe do prawidłowych struktur lub wyborów zgodnych z zasadami.Zmień rankingModel, który zmienia kolejność początkowego zestawu pobranych wyników, tak aby najbardziej odpowiednie elementy były umieszczane na górze.Wyszukiwanie wiązkiAlgorytm dekodowania, który utrzymuje kilka najlepszych sekwencji kandydujących na każdym kroku, aby znaleźć wyniki o większym prawdopodobieństwie.TemperaturaUstawienie próbkowania kontrolujące losowość generowanych wyników.ŻetonFragment tekstu przetwarzany przez modele językowe, taki jak fragment słowa lub symbol.

Dowiedz się więcej z naszych bezpłatnych przewodników

Typical SamplingSpeculative Sampling VerificationEntropy-Based SamplingEarly Stopping

Zobacz także

Transfer LearningTool UseTransformerTokenizationTraining LossUnsupervised LearningValidation SetSystem Prompt