問題 No.1025
RNNにおいてモデルのパラメータを学習する際、時間を過去に遡る形でネットワークを展開し、未来の出力誤差から過去の隠れ状態へ向かって勾配を計算していく誤差逆伝播法の拡張手法を【 】と呼ぶ。
【正解の解説】
BPTT
時間を過去へ遡りながら誤差を伝えていく学習方法です。RNNという、過去の情報を順番に処理するモデルで学習を行う際に不可欠な仕組みです。
スポンサーリンク
【その他の選択肢の解説】
確率的勾配降下法
データを一つずつ、あるいは少しずつ取り出して学習を進める、機械学習における最も基礎的な学習の進め方です。
強化学習
試行錯誤を通じて、より多くの報酬が得られるような行動を選択できるように学習する、機械学習の一分野です。
アテンション
文章の中で「どこが重要か」に注目し、その部分を重点的に扱うことで、情報の関連性を正しく解釈できるようにする仕組みです。