G検定対策
④ ディープラーニングの要素技術 / 19. 正規化層

グループ正規化とは

グループ正規化とは、チャンネルを複数グループに分割し、グループごとに正規化を行う手法です。バッチサイズに依存しないため、ミニバッチが小さい場合に有効です。

この用語はG検定シラバスの「19. 正規化層」に含まれます。 章全体の用語は用語解説④(全60語)にまとまっています。

一言でいうと

チャンネルをいくつかの束に分け、その束ごとに分布を整える正規化です。

中間的な位置づけ

グループ正規化は、レイヤー正規化インスタンス正規化中間にあたります。

グループの分け方で両者の間を連続的に調整できると理解すると、4手法の関係がすっきり整理できます。

4つの正規化手法の比較。バッチ正規化・レイヤー正規化・インスタンス正規化・グループ正規化が、それぞれどの範囲で統計量を計算するか
グループ正規化は、1サンプルのチャンネルをいくつかの束に分けて正規化する。グループ数を1にすればレイヤー正規化、チャンネル数と同じにすればインスタンス正規化に一致する——両者の中間にあたる。

どんなときに使うか

高解像度の画像や3次元データを扱う場合、メモリの制約からバッチサイズを大きくできません。このときバッチ正規化は効果が落ちます。

グループ正規化はバッチサイズに依存しないため、こうした場面で有力な選択肢になります。

提案された背景

物体検出やセグメンテーションでは、入力画像が大きくメモリを圧迫するためバッチサイズを2や4しか取れないことがあります。

この条件ではバッチ正規化の精度が明確に落ちます。グループ正規化はそうした現場の制約から生まれた手法だと理解すると位置づけが明確になります。

混同しやすい用語との違い

用語ポイント
グループ正規化チャンネルをグループ分け。小バッチで有効
レイヤー正規化全チャンネルをまとめる(グループ数1に相当)
インスタンス正規化1チャンネルずつ(グループ数=チャンネル数に相当)

🎯 G検定での押さえどころ

  • チャンネルをグループに分けて正規化
  • バッチサイズに依存しない
  • レイヤー正規化とインスタンス正規化の中間

⚠️ よくある誤りの選択肢

  • 「グループ正規化はバッチサイズが大きいときにしか使えない」→ 誤り。小さいときにこそ有効です

📘 もっと深く学ぶ

関連する用語

スポンサーリンク

ご利用にあたって 本ページの内容は、JDLAが公開しているG検定シラバス2024や公式テキストなど、一般に公開されている情報をもとに独自に整理・解説したものです。実際の試験の出題内容を示すものではなく、また合格を保証するものでもありません。制度・法令・試験要項は変更されることがあるため、最新の情報は必ずJDLA公式サイトでご確認ください。

\ 公式LINE・登録無料 /

友だち追加で4大特典をプレゼント中🎁

E資格ミニ模試(全15問)/覚えておくべき数式チェック49本
医療現場の生成AI安全活用ガイド/医療AI用語事典100

📱 友だち追加して特典を受け取る

▶ 特典のくわしい内容を見る