Lewati ke konten
Donasi
Mulai di siniMulailah belajar
Belajar
Pergi ke BelajarKursusPanduanTutor AIPrompt libraryKuisSertifikatGlosarium
Berita
Pergi ke BeritaBerita AI terbaruPelacak topikResearch & datasetsBlogStandar editorialKoreksi
Alat
Pergi ke AlatDirektori alatDaftar terbaikBandingkan alatCost calculatorPemurni CepatKirim alat
Lowongan
Pergi ke LowonganTelusuri pekerjaan AIPosting pekerjaanMensponsori AIU
Misi
Pergi ke MisiMisiDampak & statistikPenulisHelp centreWhat's newBantuan
Donasi
Rumah/Glosarium/Tanda
Istilah Glosarium AI

Apa itu Tanda?

Definisi

Sepotong teks yang diproses oleh model bahasa, seperti potongan kata atau simbol.

Istilah terkait

AI Generatif
Sistem AI yang menghasilkan konten baru seperti teks, gambar, audio, video, atau kode.
Model Bahasa Besar (LLM)
Model bahasa yang dilatih pada corpora teks besar untuk menghasilkan dan menganalisis teks.
Model Multimoda
Model yang dapat memproses atau menghasilkan beberapa tipe data seperti teks, gambar, dan audio.
Potongan Kalimat
Tokenizer tanpa bahasa yang mempelajari unit subkata langsung dari teks mentah tanpa terlebih dahulu membagi spasi.
GSM8K
Tolok ukur soal cerita matematika sekolah dasar yang digunakan untuk mengevaluasi penalaran langkah demi langkah dalam model bahasa.
Tokenisasi
Proses pemisahan teks menjadi token untuk masukan model.

Pelajari lebih lanjut di panduan gratis kami

SentencePiece TokenizationWordPiece TokenizationTokenizer-Free Byte-Level ModelsSpeculative Streaming and Multi-Token Prediction

See also

TemperatureSystem PromptTool UseSynthetic DataTop-k SamplingSupervised LearningTop-p (Nucleus) SamplingSparse Model
PreviousTemperatureNextTokenization
Jelajahi Glosarium AI selengkapnyaJelajahi semua panduan AI gratis
Buletin

Sedikit kejelasan. Di kotak masuk Anda.

Berita, alat, pilihan pembelajaran, dan peluang AI paling berguna minggu ini. Sinyal jelas, tidak ada spam.

Tidak ada spam. Berhenti berlangganan dalam satu klik. Kebijakan Privasi

AI Understanding

Pendidikan AI tetap gratis. Sebuah organisasi nirlaba 501(c)(3) yang mengajarkan kepada masyarakat cara kerja AI - dan cara menggunakannya dengan baik.

Baca misi kami↗
Badan amal publik 501(c)(3)

EIN 41-3273048

Belajar

  • Kursus
  • Semua Panduan
  • Apa Itu AI
  • ChatGPT & LLM
  • Prompt Engineering
  • AI Generatif
  • Generator Gambar AI
  • Etika AI
  • Masa Depan AI
  • Glosarium
  • Kuis
  • Sertifikasi

Sumber Daya

  • Berita
  • Blog
  • Buletin
  • Direktori Alat AI
  • Perbandingan
  • Kalkulator Biaya AI
  • Perpustakaan Cepat
  • Dewan Pekerjaan AI
  • Statistik AI
  • Research & datasets
  • Kirim Alat

Organisasi

  • Misi
  • Standar Editorial
  • Koreksi
  • Sponsor
  • Donasi
  • Pusat Bantuan
  • Apa yang Baru
  • Kontak
  • Laporkan Masalah

Hukum

  • Keamanan
  • Kebijakan Privasi
  • Kebijakan Cookie
  • Syarat Penggunaan
  • Pengungkapan
  • Kebijakan Donatur
  • Semua halaman legal
  • Peta Situs

Akun

  • Masuk
  • Daftar
  • Kirim Alat
Mandiri. Membuka. Untuk semua orang.

Jaga agar pendidikan AI tetap gratis dan terbuka

Dukung misi kami

© 2026 AI Understanding. Hak cipta dilindungi undang-undang.

Standar editorialKoreksiPendanaan & pengungkapanHubungi kami