問題 No.3204
リカレントニューラルネットワーク（RNN）の派生形であるLSTMにおいて、情報の取捨選択を行う機構として用いられる「更新ゲート」に関する記述として、不適切なものを1つ選べ。
【正解の解説】
更新ゲートは、過去のすべての情報を完全に忘却し、新しい入力情報のみを100％の割合でセル状態に反映させる役割を持つ。
更新ゲートは過去の記憶をすべて捨て去るのではなく、過去の情報と新しい入力をどのような割合でバランスよく混ぜ合わせるかを調整する役割を持っています。料理に例えると、すべてを新しい食材に変えるのではなく、昔から伝わる秘伝のタレと今日の新鮮な出汁を絶妙な比率でブレンドして味を調えるようなものであり、完全にリセットするわけではありません。
スポンサーリンク
【その他の選択肢の解説】
更新ゲートは、過去の記憶情報をどれだけ保持するかを決定し、新しい入力情報と組み合わせてセル状態を調整する役割を持つ。
これはLSTMの更新ゲートの正しい働きを説明しているため不適切ではありません。更新ゲートは忘却ゲートの働きと協力しながら、これまでの大事な文脈と今回新しく入ってきた情報のどちらをどれだけ重視するかを判断し、記憶の引き出しをアップデートする重要な舵取りを行っています。
更新ゲートは、出力される隠れ状態の値を直接制御し、次のタイムステップへの伝播量を最終的に決定する役割を持つ。
次のタイムステップへ伝播する最終的な出力値を調整するのは「出力ゲート」の担当領域です。更新ゲートはあくまで「セル状態（長期記憶）」のアップデートを管理するものであり、最終的な出口の調整役である出力ゲートと混同させようとする典型的な出題者の罠です。
更新ゲートは、入力された情報の中から不必要なノイズ成分だけを選択的に除去し、残った特徴量をセル状態に加算する役割を持つ。
ノイズを取り除いて新しい情報をセル状態にどれくらい書き込むかを決めるのは「入力ゲート」の主な役割です。更新ゲートはそれら全体のブレンド比率を総合的に管理するものであり、個別のノイズ除去という局所的な機能とすり替えることで初学者を迷わせる巧妙な誤り選択肢です。