← Kembali kepada semua kuizKuiz berkaitan panduan • Sederhana Tahap • 6 Soalan

Kuiz Pengekodan Tokenisasi dan Pasangan Byte

Uji perkara yang anda ketahui tentang cara teks menjadi token dan cara BPE membina perbendaharaan kata.

Laluan panduan yang berkaitanTokenisasi Dan Pengekodan Pasangan Byte
soalan 1 daripada 6

Apakah yang dihasilkan oleh tokenisasi untuk model bahasa untuk dibaca?