Tokenトークン(トークン)初級Core ConceptsAIモデルが処理するテキストの小さな単位（単語、単語の一部、句読点）。モデルはトークンの列としてテキストを読み書きする。なぜ重要かトークン制限はモデルが一度に処理できるテキスト量を決定し、API料金はトークン使用量に基づきます。実際の活用例「I love AI」という文は「I」「 love」「 AI」の3トークンに分割される場合があります。