ตัวนับโทเคน AI

โทเคนคือหน่วยข้อความที่โมเดล AI ประมวลผล ในภาษาอังกฤษ ประมาณ 1 โทเคน = 4 อักขระหรือ 0.75 คำ ในภาษา CJK 1 โทเคน ≈ 1.5-2 อักขระ

ใช่ เครื่องมือนี้ใช้อัลกอริทึมโดยประมาณสากลที่ใช้ได้กับทุกโมเดล LLM รวมถึง GPT, Claude, Gemini, Llama, Mistral และอื่นๆ ค่าประมาณมักอยู่ใน 5-10% ของจำนวนที่แม่นยำ

การนับใช้อัลกอริทึมประมาณค่าสากลตามรูปแบบการแบ่งคำ BPE ให้ค่าประมาณที่ใกล้เคียง (มักอยู่ใน 5-10%) แต่อาจแตกต่างเล็กน้อยจากจำนวน API ที่แม่นยำเนื่องจากการแบ่งคำเฉพาะของแต่ละโมเดล

ขยายส่วนประเมินต้นทุนแล้วป้อนราคา API ของคุณสำหรับโทเคนอินพุต เอาต์พุต และแคชฮิต เครื่องมือจะคำนวณต้นทุนโดยประมาณจากจำนวนโทเคนและราคาของคุณ

ไม่ การนับโทเคนทั้งหมดทำในเบราว์เซอร์ของคุณ ข้อความของคุณไม่ออกจากอุปกรณ์และไม่ถูกส่งไปยังเซิร์ฟเวอร์ใดๆ