G検定(ジェネラリスト検定) 人工知能とその動向 練習問題 第28問: AlphaZeroを報告した論文(Silverほか, arXiv:1712.01815, 2017年12月投稿)と、DeepMindの解説記事(2018年)の説
AlphaZeroを報告した論文(Silverほか, arXiv:1712.01815, 2017年12月投稿)と、DeepMindの解説記事(2018年)の説明として、最も適切なものはどれか。
解答と解説を先に見る
先に見ると、この問題は今回は育ちません。
正解: 1. ルール以外の知識を与えず、ランダムな手から始める自己対局の強化学習で、1つのアルゴリズムがチェス・将棋・囲碁を学習した
肢1が正解です。この論文の要旨は、ゲームのルール以外の領域知識を与えずにランダムな対局から始め、1つのAlphaZeroのアルゴリズムでチェス・将棋・囲碁のそれぞれで超人的な水準に達したと述べています。
DeepMindの解説も、学習していないニューラルネットワークが試行錯誤の強化学習で自分自身と対局を重ね、勝ち・負け・引き分けからパラメータを調整すると説明しています。
肢2は従来のチェスエンジンの説明で、AlphaZeroは手作りの規則を深層ニューラルネットワークと汎用のアルゴリズムに置き換えました。肢3について、論文はα-β探索ではなく汎用のモンテカルロ木探索を使うとし、解説は調べる局面の数が従来のエンジンよりずっと少ないとしています。
肢4について、論文はゲームごとに別のAlphaZeroを、ランダムに初期化したパラメータから学習させたとしています。
関連キーワード: アルファ碁(AlphaGo)・モンテカルロ法・強化学習・自己対局
模試 (145問)
本試験の規模にそろえて、8分野を通して解く
オンライン試験の案内(145問程度・100分)にそろえた145問・100分(1つあたり約41秒)で、技術分野から法律・倫理まで8分野を混ぜて解きます。JDLAは分野ごとの出題数と合格ラインを公表していないため、配分と70%の目安はぴよパスの設定です。100分を取れない日は、開始画面で41分の短縮演習も選べます。Premium (月980円)Premium (ご利用中)時間制限つきの実力チェック