生成AIパスポート試験 生成AIの仕組みと歴史 練習問題 第23問: アライメントとファインチューニングの関係として最も適切なのはどれか。

正解: 4. アライメントは人間の意図や価値に沿わせる目標で、ファインチューニングはその手段になり得る

アライメントはモデルを人間の意図や価値に沿うようにする広い目標で、追加データや人間のフィードバックを使うファインチューニングはそのための手段になり得る。「同一の単位」ではない。「同じ工程の別名」でもなく、ファインチューニングは特定の課題や分野への適応にも使われ、アライメントの手段としてはその一つの使い方である。「禁止語を出力後に伏せ字にする処理」は出力の後処理にすぎず、アライメントはファインチューニングでモデル自体を人間の意図に沿わせる取り組みを含むため、ファインチューニングと無関係ではない。

関連キーワード: アライメント・ファインチューニング・人間の意図・事前学習