生成AIパスポート試験 現在の生成AIの動向 練習問題 第9問: 自己回帰モデルによる文章生成の基本的な考え方として、最も適切なものはどれか。

正解: 1. それまでに並んだトークンを条件として、次のトークンの確率を順に求めながら生成する

自己回帰型の言語モデルは、既に現れたトークン列を条件に次のトークンの分布を求め、この処理を繰り返して系列を伸ばす。「辞書の先頭語だけを繰り返す」は文脈条件付き予測ではない。「未来の正解文を外部から受け取る」は生成モデルの仕組みを説明していない。「次の語を予測せず、入力文章を一文字も変えずに複製する」は次トークン生成を行っていない。

関連キーワード: 自己回帰モデル・次トークン予測・系列生成・条件付き確率