G検定(ジェネラリスト検定) ディープラーニングの要素技術 練習問題 第8問: バッチ正規化 (Batch Normalization) の説明として、最も適切なものはどれか。
ディープラーニングの要素技術
– / 57 解いた
第8問
バッチ正規化 (Batch Normalization) の説明として、最も適切なものはどれか。
解答と解説を先に見る
先に見ると、この問題は今回は育ちません。
正解: 2. ミニバッチごとに層への入力を平均と分散で正規化し、学習を安定させる。
肢2が正解です。バッチ正規化を提案した論文 (Ioffe と Szegedy, 2015) は、学習中に前の層のパラメータが変わると各層への入力の分布が変わる現象を内部共変量シフトと呼び、ミニバッチごとに層への入力を正規化してモデルの一部に組み込むことで、大きな学習率を使えるようにしました。
畳み込み層では、同じ特徴マップ (チャネル) の値をミニバッチ内の全位置でまとめて正規化し、スケールとシフトのパラメータをチャネルごとに学習します。
肢1はドロップアウト、肢3はL2正則化 (重み減衰) の説明です。
肢4は誤りで、バッチ正規化はネットワークの内部の層に入れる処理です。入力データの前処理の正規化と混同しないようにします。
関連キーワード: バッチ正規化・正規化層・内部共変量シフト・ミニバッチ
広告
模試 (145問)
本試験の規模にそろえて、8分野を通して解く
オンライン試験の案内(145問程度・100分)にそろえた145問・100分(1つあたり約41秒)で、技術分野から法律・倫理まで8分野を混ぜて解きます。JDLAは分野ごとの出題数と合格ラインを公表していないため、配分と70%の目安はぴよパスの設定です。100分を取れない日は、開始画面で41分の短縮演習も選べます。Premium (月980円)Premium (ご利用中)時間制限つきの実力チェック
広告