13_Learning Algorithm

2019-10-07 이민예

Learning Algorithm

• Gradient Descent (= Batch Gradient Descent)

  • 단점 :

    • 한 Epoch을 돌 때, 계산량이 너무 많다.

    • 적은 데이터로 여러번의 Epoch을 돌 경우, 과적합이 일어날 수 있다.

Gradient Descent Algorithm

• Stochastic Gradient Descent

SGD기반의 알고리즘 분류도

[ Reference ]

https://deepapple.tistory.com/7