19_딥러닝이론및응용 HW #5

2019021166 이민예 Date: 2019-12-07

4. y = (0,1) 일때, 식(8.16) 을 유도하시오.

로그우도를 목적함수로 사용할 때 주의해야할 점.

• 모든 노드값을 고려하는 평균제곱 오차나 교차 엔트로피와 달리 하나의 출력값만 본다.

• 로그 밑을 2로 써도 되고 자연상수로 써도 된다. 하지만 로그 밑이 명시되어있지 않을 때는 자연로그이다.

$$e = -log_2o_y$$

• 즉 출력값 $o_y$가 1이 되어야 하는데 0.0508이 나올때와, 0.8360이 나올때, 작을 수록 에러값, 즉 결과값이 크다.

음의 로그함수

5. 식 (8.19)는 식 (8.16)을 일반화한 것이다. 일반화 과정을 설명하시오.