Termin ze słownika AI

Czym jest Okno kontekstowe?

Definicja

Maksymalna ilość tokenów wejściowych, które model języka może przetworzyć jednocześnie.

Przejrzyj pełny słownik AIPrzeglądaj wszystkie bezpłatne przewodniki AI

Powiązane terminy

TokenizacjaProces dzielenia tekstu na tokeny na potrzeby wprowadzania danych modelu.Dryf danychZmiana rzeczywistych danych wejściowych w czasie, która może obniżyć wydajność modelu.Model multimodalnyModel, który może przetwarzać lub generować wiele typów danych, takich jak tekst, obraz i dźwięk.PerplexityMetryka modelu językowego mierząca stopień zaskoczenia modelu prawdziwymi następnymi tokenami.PodpowiedźInstrukcje wejściowe i kontekst dostarczony do modelu generatywnego.Uwaga na przesuwane oknoWzorzec uwagi, w którym każdy token obsługuje tylko okno pobliskich tokenów o stałym rozmiarze, aby zmniejszyć obliczenia.

Dowiedz się więcej z naszych bezpłatnych przewodników

Model Context ProtocolPosition Interpolation for Context ExtensionYaRN Context Window ScalingYaRN and Context Length Extension

Zobacz także

Computer VisionContinual LearningComputeConvolutional Neural Network (CNN)CLIPCross-Entropy LossClassifierData Augmentation