G検定対策
④ ディープラーニングの要素技術 / 22. 回帰結合層

LSTMとは

LSTMとは、長期依存関係を学習可能にするため、入力・出力・忘却の3つのゲートとセル状態を持つRNNです。勾配消失問題の解決策として特に重要です。

この用語はG検定シラバスの「22. 回帰結合層」に含まれます。 章全体の用語は用語解説④(全60語)にまとまっています。

一言でいうと

3つのゲートと記憶用のセル状態を持ち、長い系列の依存関係を学べるRNNです。

3つのゲートの役割

いずれもシグモイド関数で0〜1の値を出し、通過量を調整します(ゲート機構)。

LSTMの構造。セル状態が長期記憶を運び、忘却ゲート・入力ゲート・出力ゲートの3つが情報の出し入れを調整する
上を貫くのがセル状態で、長期記憶をほとんど変換せずに運ぶ。その出し入れを調整するのが忘却・入力・出力の3つのゲート(GRUは2つ)。

セル状態が鍵

LSTMの中核はセル状態という記憶を運ぶ経路です。ここは掛け算による大きな変化を受けにくく、情報が長く保たれます

通常のRNNでは同じ重みを繰り返し掛けるために勾配消失問題が起きていました。セル状態という「情報の高速道路」を用意することでこの問題を大きく緩和したのがLSTMです。ResNetのスキップ結合と発想が似ています。

覗き穴結合という派生

LSTMには、ゲートの計算にセル状態の値も参照させる覗き穴結合(peephole connection)という派生があります。

G検定では名称レベルで押さえておきたいところです。「LSTMには複数の変種がある」と知っておけば十分です。簡略化の方向に進んだのがGRUだと整理できます。

混同しやすい用語との違い

用語ポイント
LSTMゲート3つ+セル状態。長期依存に強い
GRUゲート2つ。セル状態なし。軽量
RNN(基本形)ゲートなし。長期依存が苦手

🎯 G検定での押さえどころ

  • ゲートは3つ(入力・忘却・出力)
  • セル状態が長期記憶を担う
  • 勾配消失問題の解決策として登場した

⚠️ よくある誤りの選択肢

  • 「LSTMは2つのゲートを持つ」→ 誤り。3つです(それはGRU)
  • 「LSTMは勾配消失問題を完全に解決した」→ 誤り。大きく緩和しますが完全ではありません

📘 もっと深く学ぶ

関連する用語

スポンサーリンク

ご利用にあたって 本ページの内容は、JDLAが公開しているG検定シラバス2024や公式テキストなど、一般に公開されている情報をもとに独自に整理・解説したものです。実際の試験の出題内容を示すものではなく、また合格を保証するものでもありません。制度・法令・試験要項は変更されることがあるため、最新の情報は必ずJDLA公式サイトでご確認ください。

\ 公式LINE・登録無料 /

友だち追加で4大特典をプレゼント中🎁

E資格ミニ模試(全15問)/覚えておくべき数式チェック49本
医療現場の生成AI安全活用ガイド/医療AI用語事典100

📱 友だち追加して特典を受け取る

▶ 特典のくわしい内容を見る