강의 소개
경사하강법 기반의 선형회귀 알고리즘에 대해 설명합니다.
경사하강법의 단점을 보완하는 확률적 경사하강법(stochastic gradient descent)을 소개합니다.
2강에서 배웠던 무어-펜로즈 역행렬을 활용한 선형회귀분석과 비교하여, 선형 모델 외에도 적용 가능한 경사하강법-선형회귀분석 방법을 설명합니다. 이 때 나오는 경사하강법 알고리즘 수식을 정확히 이해하고 넘어가면 좋겠습니다.
그리고 딥러닝에서 경사하강법이 가지는 한계를 설명하고, 이를 극복하기 위한 확률적 경사하강법을 소개합니다.
확률적 경사하강법은 오늘날 딥러닝 학습에 널리 활용되는 방법이므로 충분히 공부하시고 넘어가시기 바랍니다.