LLMトークン計算

このツールについて

対応する GPT・reasoning モデルのトークン数を数え、このページに設定された $/1M 単価で入出力コストを見積もります。トークンは多くの LLM API の課金・コンテキスト単位です。

トークン化はモデル固有です。同じ文字列でも語彙とマージ表の違いで件数が変わります。英語・CJK・絵文字・空白・コードの挙動も異なります。

プロンプト長の把握、チャンク計画、ざっくり費用試算に使ってください。KPI 下の単価に紐づく概算なので、予算前に提供元の最新価格を確認してください。

よくある用途

• チャット API 呼び出し前のシステム／ユーザープロンプト長確認
• CJK やコードのモデル別トークン差の比較
• 同じトークン数を入力／出力として扱った場合の概算費用

使い方

1. プロンプトや文書片を貼り付けます。デバウンス後にライブ更新されます（Calculate 不要）。
2. ドロップダウンでモデルを選びます。
3. 上部 KPI でトークン数・文字数・推定入出力コストを確認します。
4. Sample・Copy・Clear で例示・要約コピー・リセットできます。

例

実務での落とし穴

• 概算です: 設定 $/1M は公式価格の更新より遅れることがあります。予算前に提供元を確認してください。
• トークナイザー ≠ 全請求: チャットテンプレート・ツール・マルチモーダル分は貼り付け欄に出ないことがあります。
• 「文字÷4」推定ではなくモデル対応 tiktoken を使い、同一件数の入出力コストを並べて示します。
• 極端に長い貼り付けは WASM トークナイザーでブラウザメモリを圧迫し得ます。

参考資料

• OpenAI tokenizer
• OpenAI API pricing
• OpenAI: tokens concept