オンライン文字数・AI トークンカウンターの概要
エントリーシート(ES)や職務経歴書の文字数調整、ブログ記事や SEO タイトル・メタディスクリプションの最適化、論文要旨の執筆から、生成 AI(LLM)開発におけるプロンプトのコンテキスト上限管理・API コスト試算まで、正確なテキスト計測はあらゆる場面で欠かせません。特に大規模言語モデルでは、人間が数える「文字数」ではなく、モデル固有のトークナイザーによって分割された トークン(Token) 単位で入力上限や利用料金が決まります。
AllUtility の文字数・AI トークンカウンターは、テキストを入力または貼り付けると同時に、空白込み文字数・空白除外文字数・単語数 に加え、主要 AI モデル(GPT・Gemini・Claude)ごとのトークン数をリアルタイムで一括算出します。すべての集計とトークン計算は外部 API 通信を一切行わず、100% お使いのブラウザ内のみで完結するため、公開前の原稿や社外秘のプロンプトも安心して計測できます。
主な機能
- 空白込み・空白除外のリアルタイム分離集計:採用応募フォームや原稿規定で指定される「スペース込み文字数」と、半角・全角スペースや改行を除いた「純粋な文字数」を同時に確認できます。
- 3大 LLM のトークン数を横並び比較:OpenAI GPT シリーズ、Google Gemini シリーズ、Anthropic Claude シリーズそれぞれのトークナイザー基準によるトークン数を一度に比較できます。
- 日本語・多言語・コード混在に完全対応:日本語の漢字・ひらがな・カタカナ、英数字、絵文字、JSON データやソースコードが混在する長文でも入力遅延なく瞬時にカウントします。
- 100% ローカル完結の高いプライバシー:トークナイザー処理はブラウザのメモリ上で直接動作するため、入力内容が外部サーバーや AI 事業者へ送信されることはありません。
使い方の手順
- テキストの入力・貼り付け:中央のエディタに履歴書・記事原稿・SEO メタ文・AI プロンプトを直接入力するか、コピーして貼り付けます。
- 文字数・単語数の確認:下部の統計カードで「文字数(空白込み)」「文字数(空白除外)」「単語数」をチェックし、規定の文字数に収まるよう文章を調整します。
- AI モデル別トークン数の確認:GPT・Gemini・Claude 各カードのトークン数を見比べ、モデルのコンテキストウィンドウ上限や API コスト見積もりに活用します。
- 編集に応じた自動更新:テキストを書き換えるとボタン操作なしで全指標が即座に再計算されます。
実務で役立つ目安とエンコード・トークン化の基礎知識
用途別の推奨文字数と、日本語テキスト特有のトークン・バイト特性を把握しておくと調整がスムーズです。
サンプル文: 「AllUtility リアルタイム文字数計測」
- 文字数(空白込み): 22文字
- 文字数(空白除外): 21文字(半角スペース1文字を除外)
- 空白区切り語数 : 2語
執筆および AI 開発時に押さえておきたいポイントは以下の通りです。
- Web SEO タグの文字数目安:検索結果画面で末尾が省略(
...)されずに表示される目安は、ページタイトル(Title)が全角28〜35文字前後(英語50〜60文字)、メタディスクリプションが全角80〜120文字前後(英語120〜160文字)です。 - 日本語と英語の AI トークン消費差:英語では平均して
1単語 ≒ 1〜1.3トークン程度ですが、日本語は BPE(Byte-Pair Encoding)等の辞書構造上、漢字やひらがな1文字あたり1〜2トークン前後に分割されることがあり、同じ内容でも英語よりトークン数が多くなる傾向があります。 - UTF-8 のバイト数計算:Web 標準の UTF-8 エンコーディングでは、半角英数字・半角記号は
1バイト、日本語のひらがな・カタカナ・一般的な漢字・全角記号は3バイト(従来の Shift_JIS では2バイト)、絵文字は主に4バイトとして計算されます。