cái gì là Hình phạt tần số?

Cài đặt giải mã làm giảm khả năng xuất hiện mã thông báo, khuyến khích các chủ đề mới.

Cài đặt giải mã làm giảm xác suất của mã thông báo mà mô hình đã tạo để giảm vòng lặp.

Một thước đo mô hình ngôn ngữ đo lường mức độ ngạc nhiên của mô hình đối với các mã thông báo tiếp theo thực sự.

Chiến lược giải mã chỉ lấy mẫu từ k mã thông báo tiếp theo có khả năng xảy ra nhất.

Chiến lược tạo giới hạn mã thông báo đầu ra ở các cấu trúc hợp lệ hoặc các lựa chọn tuân thủ chính sách.

Một phương pháp tăng tốc suy luận trong đó một mô hình dự thảo nhỏ đề xuất các mã thông báo mà một mô hình lớn hơn sẽ xác minh song song.