【E資格対策】確率的勾配降下法とモメンタム

E資格対策としての確率的勾配降下法とモメンタムの備忘録です。「学習率」「最急降下法」「ミニバッチ」「Pathological Curvature」「Momentum」「Nesterov Accelerated Gradient」の内容を含んでいます。