生成AI用語ドリル

生成AI・生成のしくみNo.069 / 204

トークン化

文章をトークンに区切ること。

確認問題

次の説明に当てはまる用語はどれか。

モデルが一度に扱える入力と出力のトークンの量の上限。これを超えた分は考慮されない。