Token
Artinya
Token adalah potongan kecil teks, bisa satu kata utuh, sepotong kata, atau tanda baca, yang dibaca dan ditulis AI seperti ChatGPT, Gemini, dan Claude.
Diperbarui · diperiksa Syamil Jihad
Perumpamaannya
Bayangkan kalimatmu itu mainan balok bongkar-pasang. Sebelum dibaca AI, kalimat itu dibongkar jadi keping-keping. Kata yang sering muncul di bahan belajar AI, misalnya kata Inggris "report", sudah punya keping utuh sendiri. Kata yang lebih jarang harus dirakit dari beberapa keping kecil.
Yang dihitung AI adalah jumlah kepingnya, bukan jumlah katanya. Batas panjang obrolan dan biaya pemakaian lewat API dihitung per keping. Makin banyak keping, makin cepat batasnya tercapai.
Contoh nyata
Aku tempel kalimat "Tolong rangkum laporan ini" ke penghitung token Otaknologi. Di GPT, keluarga model di balik ChatGPT, hasilnya 6 token. Kalimat Inggris yang artinya sama, "Please summarize this report", cuma 4 token. Kata "rangkum" dipecah jadi "rang" dan "kum", sedangkan "summarize" utuh satu keping.
Itu bukan kebetulan. Kami mengukur 1.012 kalimat yang isinya sama dalam dua bahasa. Satu kata Indonesia rata-rata jadi 1,69 token di GPT, 1,57 di Gemini, dan 3,42 di Claude 5.5. Jadi teks Indonesia yang sama bisa dihitung sekitar dua kali lebih banyak token di Claude daripada di GPT.
Kamu yang cuma ngobrol di aplikasi ChatGPT memang nggak ditagih per token. Tapi panjang dokumen yang bisa dibaca sekaligus tetap dibatasi dalam token, namanya context window.
Salah kaprah
"1 token = 1 kata." Untuk bahasa Inggris pun nggak pas: Google menulis 100 token kira-kira setara 60–80 kata Inggris. Untuk Bahasa Indonesia lebih boros lagi, seperti contoh di atas.
"Token AI sama kayak token listrik." Beda jauh. Token listrik itu pulsa yang kamu beli lalu diisi ulang. Token AI cuma satuan hitung teks. Kamu baru bayar per token kalau memakai AI lewat API, sedangkan langganan aplikasi chat dibayar per bulan.
"Semua AI menghitung token dengan cara yang sama." Tiap pembuat AI punya pemotong teks sendiri, dan pemotongnya bisa ganti. Anthropic menulis, model Claude 4.7 ke atas memakai pemotong baru yang menghasilkan sekitar 30% lebih banyak token untuk teks yang sama. Jadi jumlah token dari satu AI nggak bisa dipakai untuk menebak AI lain.
Istilah terkait
- LLMLLM (large language model) adalah program AI yang dilatih dari teks dalam jumlah sangat besar sampai pandai menebak kata berikutnya, sehingga bisa menjawab, merangkum, dan menulis seperti ChatGPT, Gemini, dan Claude.
- Context windowContext window adalah batas jumlah teks yang bisa dilihat AI sekaligus saat menjawab, termasuk perintahmu, file yang kamu lampirkan, riwayat obrolan, dan jawaban yang sedang ia tulis.
- PromptPrompt adalah perintah, pertanyaan, atau bahan yang kamu kirim ke AI, misalnya lewat kolom chat ChatGPT, Gemini, atau Claude, supaya AI mengerjakan sesuatu untukmu.
- Model AIModel AI adalah hasil akhir pelatihan AI, berupa berkas berisi banyak sekali angka, yang menerima masukan seperti pertanyaan atau foto lalu menghasilkan keluaran seperti jawaban, tebakan, atau gambar.
- APIAPI (application programming interface) adalah pintu resmi yang dipakai satu program untuk meminta data atau layanan dari program lain, dengan format pesan yang sudah disepakati.
- ChatGPTChatGPT adalah aplikasi chatbot AI buatan OpenAI yang bisa diajak tanya-jawab, menulis, merangkum, membuat gambar, dan membantu kerjaan lewat web maupun aplikasi HP.
- ClaudeClaude adalah asisten AI sekaligus keluarga model AI buatan perusahaan Anthropic, yang bisa diajak menulis, menganalisis dokumen, membaca gambar, dan membuat kode.
- DatasetDataset adalah kumpulan data yang dikumpulkan dan dirapikan untuk satu tujuan, misalnya melatih, menguji, atau mengukur kemampuan sebuah program AI.
- EmbeddingEmbedding adalah cara mengubah kata, kalimat, atau gambar menjadi deretan angka, sehingga komputer bisa mengukur seberapa mirip artinya dengan teks atau gambar lain.
- GeminiGemini adalah nama asisten AI sekaligus keluarga model AI buatan Google, yang bisa membaca teks, gambar, dan suara, lalu membantu menulis, merangkum, mencari ide, dan membuat gambar.