1. 인공지능과 최적화
1.1. 경사하강법
1.1.1. 요약설명
경사하강법은 인공지능의 딥러닝에 이용되는 핵심 알고리즘으로, 입력값이 변했을 때 함수의 출력값이 어떻게 달라지는지 정량적으로 파악하기 위해 미분이 적용된다. 손실함수를 미분하면 특정 지점에서의 기울기를 알 수 있으며, 이 기울기의 절댓값이 작아지는 방향으로 지점을 옮기면 손실함수의 최솟값을 찾을 수 있다. 이러한 방식으로 최적의 예측 모형을 구하는 것이 경사하강법의 핵심 원리이다.
경사하강법을 이해하기 위해서는 편미분 개념이 필요한데, 편미분은 여러 변수로 이루...
2024.10.29