What is Context Window? Definition | AI Understanding

Definition

Die maximale Anzahl an Eingabetokens, die ein Sprachmodell gleichzeitig verarbeiten kann.

Verwandte Begriffe

Der Prozess der Aufteilung von Text in Token zur Modelleingabe.

Eine Verschiebung der realen Eingabedaten im Laufe der Zeit, die die Modellleistung beeinträchtigen kann.

Multimodales Modell

Ein Modell, das mehrere Datentypen wie Text, Bild und Audio verarbeiten oder generieren kann.

Eine Sprachmodellmetrik, die misst, wie überrascht das Modell von echten nächsten Token ist.

Die Eingabeanweisungen und der Kontext, die einem generativen Modell bereitgestellt werden.

Schiebefenster Achtung

Ein Aufmerksamkeitsmuster, bei dem sich jedes Token nur um ein Fenster mit fester Größe benachbarter Token kümmert, um den Rechenaufwand zu reduzieren.

Erfahren Sie mehr in unseren kostenlosen Ratgebern

Model Context Protocol Position Interpolation for Context Extension YaRN Context Window Scaling YaRN and Context Length Extension

See also

Computer Vision Continual Learning Compute Convolutional Neural Network (CNN)CLIP Cross-Entropy Loss Classifier Data Augmentation

Durchsuchen Sie das vollständige KI-Glossar Entdecken Sie alle kostenlosen KI-Anleitungen