Thuật ngữ thuật ngữ AI

Cửa sổ ngữ cảnh là gì?

Định nghĩa

Số lượng mã thông báo đầu vào tối đa mà một mô hình ngôn ngữ có thể xử lý cùng một lúc.

Duyệt qua Bảng thuật ngữ AI đầy đủKhám phá tất cả hướng dẫn AI miễn phí

Điều khoản liên quan

Mã thông báoQuá trình tách văn bản thành các token để nhập vào mô hình.Trôi dữ liệuSự thay đổi dữ liệu đầu vào trong thế giới thực theo thời gian có thể làm giảm hiệu suất của mô hình.Mô hình đa phương thứcMột mô hình có thể xử lý hoặc tạo ra nhiều loại dữ liệu như văn bản, hình ảnh và âm thanh.PerplexityMột thước đo mô hình ngôn ngữ đo lường mức độ ngạc nhiên của mô hình đối với các mã thông báo tiếp theo thực sự.Lời nhắcCác hướng dẫn đầu vào và ngữ cảnh được cung cấp cho một mô hình tổng quát.Cửa sổ trượt Chú ýMột mẫu chú ý trong đó mỗi mã thông báo chỉ tham gia vào một cửa sổ có kích thước cố định của các mã thông báo lân cận để giảm tính toán.

Tìm hiểu thêm trong hướng dẫn miễn phí của chúng tôi

Model Context ProtocolPosition Interpolation for Context ExtensionYaRN Context Window ScalingYaRN and Context Length Extension

Xem thêm

Computer VisionContinual LearningComputeConvolutional Neural Network (CNN)CLIPCross-Entropy LossClassifierData Augmentation