|
접적으로 최소가 되는 점을 찾기 어려운 경우에 유용하게 쓰인다. 경사하강법의 손실함수는 실제값과 예측값의 차이를 수치화해주는 함수이다. 경사하강법의 이두 값의 차이 즉 오차가 최소화되도록 매개변수를 갱신하는데 손실함수의 기울
|
|
|
법으로 특히 딥러닝에서 사용된다. 경사하강법과 역전파는 상호보완적 관계로 볼 수 있는데, 즉, 역전파를 통해 각 가중치에 대한 기울기를 구한 후 경사하강법을 통해 그 기울기를 사용하여 가중치를 업데이트한다.
따라서 역전파는 기울기
|
|
|
경사 하강법, 뉴턴/준 뉴턴 방법, 확률 경사 하강법, 역전파가 있다. 이렇게 만들어진 모델을 이용하여 선정된 데이터를 학습시키고 모델이 얼마나 좋은 성능을 보이는지에 대한 평가를 수행한다. 이렇게 기존 학습 데이터 평가뿐만 아니라 새
|
|
메뉴펼치기
