Token 計算器
離線 · 上傳 tokenizer.json 即可計算 token · 支援 BPE / WordPiece / Unigram / WordLevel
☀️
Tokenizer
編輯
展開 ▾
🗂️
拖曳
tokenizer.json
到這裡,或
點擊選擇檔案
(完全離線執行,不會上傳任何資料)
檔案分析
0 tokens
✕
📄
拖曳檔案到這裡,或點擊選擇檔案
尚未上傳檔案
費用估算
編輯
重置
載入中…
文字輸入
唯讀
手動輸入
貼上
清除
複製
加入分析
存為檔案
⚠️ 尚未載入 tokenizer — 請先上傳 tokenizer.json
–
Token 數
–
字元數
–
中日韓文字
–
英文
–
數字
–
標點符號
–
行數
–
Token / 字元
–
Token / 文字
–
大小
–
編碼耗時
–
Token / 秒
Token 視覺化
中日韓文字
英文
數字
標點符號
其他
|
解碼 byte-level
—