# 모바일에서 수식이 깨져보이니 PC모드 활용을 권장드립니다. Optimization은 ML/DL 이론의 기본 중 하나이다. ML/DL 의 많은 문제는 모델의 좋은 파라미터를 찾는 과정이다. 모델의 좋은 파라미터는 특정 최적화 문제의 솔루션이 되는 경우가 많다. 최적화에는 Constrained, Unconstrained, Convex optimization 등이 존재한다. 우선 Unconstrained optimization 을 살펴보면, 그 목표는 $$ minf(x), \ f(x):\mathbb{R^{n}}\mapsto \mathbb{R}, \ f\in \mathbb{C1} $$ R차원 벡터를 어떤 Singular R로 매핑하는 함수 f에 대해 이 함수 f를 minimization 하는 것이 목표..