問題番号: No.699 (しっかりモード)

ニューラルネットワークの学習を効率的に進めるにはパラメータの更新幅の調整が重要である。勾配の方向がブレやすい問題に対して物理的なボールが転がるような慣性を持たせる工夫と、パラメータごとに更新頻度を記録して学習率を自動調整する工夫の2つの利点を融合させ、現在最も広く使われている最適化手法はどれか。