Singkatnya, token adalah potongan data teks. AI nggak ngebaca teks pakai huruf per huruf atau kata per kata persis kayak cara otak manusia bekerja. Biar komputasinya lebih efisien, mereka mecah kalimat panjang jadi potongan-potongan kecil yang disebut token. Aturan kasarnya (rule of thumb) untuk bah...