Cost Function   비용 함수

1. 비용 함수 (Cost Function) (최적화 문제에서는, `목적 함수`라고 함)

  ㅇ 추정치를 얻는 방법의 성능 즉, 추정의 정확성을 정량화하기 위한 척도
     - 비용 함수 C(e)를 최소화하면 최적의 추정치가 얻어질 수 있음

  ㅇ 비용 함수 C(e)의 정의 例)
     - `제곱 오차`를 하나의 비용 함수화하면, → C1(e) = e2
     - `오차의 절대값`을 하나의 비용 함수화하면, → C2(e) = |e|
     - `평균제곱오차`을 하나의 비용 함수화하면, → C3(e) = E[e2] = E[(X - X̂)2] = eMSE

  ㅇ 비용 함수의 응용 例)
     - 최적화 문제의 경우에, 
        . 목적 함수(즉,비용 함수)를 최소/최대화시키는,
        . 그러한 결정 변수(파라미터)를 찾고,
        . 그것을 곧바로 최적 해로 취하거나, 
        . 이를통해 선택 가설별로 분류하기도 함