Kamus AI
Token (potongan teks yang dibaca model)
Potongan teks yang dibaca dan ditulis model, biasanya sepotong kata.
Model tidak membaca huruf atau kata utuh, melainkan token. Satu kata bahasa Indonesia sering terdiri dari dua atau tiga token. Batas panjang input, batas keluaran, dan biaya pemakaian semuanya dihitung dalam token. Teks bahasa Indonesia umumnya memakai lebih banyak token daripada teks bahasa Inggris dengan arti yang sama.
Disebut juga: Token
Istilah terkait
Muncul di 13 pelajaran
- AI sebagai penebak teks yang sangat terlatih
- Token dan jendela konteks
- Kenapa jawabannya berubah-ubah
- Kenapa model mengarang
- Agen pertama yang hanya membaca
- Membaca jejak agen
- Konteks bukan memori
- Skill sebagai prosedur
- Syarat berhenti
- Biaya per tugas agen
- Meteran kredit per pengguna
- Jejak langkah dan kegagalan diam
- Proyek: rilis bermeteran