What is Context Window? Definition | AI Understanding

Definisi

Jumlah maksimum token masukan yang dapat diproses model bahasa sekaligus.

Istilah terkait

Proses pemisahan teks menjadi token untuk masukan model.

Penyimpangan Data

Pergeseran data masukan dunia nyata dari waktu ke waktu yang dapat menurunkan performa model.

Model Multimoda

Model yang dapat memproses atau menghasilkan beberapa tipe data seperti teks, gambar, dan audio.

Metrik model bahasa yang mengukur seberapa terkejut model tersebut dengan token berikutnya yang sebenarnya.

Instruksi masukan dan konteks diberikan ke model generatif.

Perhatian Jendela Geser

Pola perhatian di mana setiap token hanya memperhatikan jendela berukuran tetap dari token terdekat untuk mengurangi komputasi.

Pelajari lebih lanjut di panduan gratis kami

Model Context Protocol Position Interpolation for Context Extension YaRN Context Window Scaling YaRN and Context Length Extension

See also

Computer Vision Continual Learning Compute Convolutional Neural Network (CNN)CLIP Cross-Entropy Loss Classifier Data Augmentation

Jelajahi Glosarium AI selengkapnya Jelajahi semua panduan AI gratis