用語解説

トークンとは?

ひとことで言うと

AIが文章を処理する最小単位。日本語1文字≒1〜2トークン目安。

トークンは、AIが文章を読み書きするときの最小単位です。単語そのものではなく、単語を細かく区切った「かたまり」で、英語なら1単語が1〜数トークン、日本語は1文字あたり1〜2トークンが目安。AIへの入力も出力もすべてトークン数で数えられます。

なぜ重要かというと、料金とコンテキストウィンドウ(一度に扱える量)の両方がトークンで決まるからです。Claude の API 利用料は入力・出力のトークン数に応じて課金され、長い文章ほどコストが増えます。プロンプトを短く整理することは、精度だけでなくコスト最適化にも直結します。

「トークン」が登場する記事・レッスン

← AI用語集一覧へ