問題番号: No.550 (しっかりモード)

AdaGradが学習後半に学習率がゼロに近づきすぎてしまう問題を解決するために、過去の勾配の移動平均を算出し、それを用いて学習率を調整する手法はどれか。