7 은닉층의 오차 계산법

그런데 은닉층에서 ➊항은 계산이 조금 다릅니다. 오차 Y_out안에는 오차 y_o1과 오차 y_o2가 포함되어 있습니다. 이전에는 오차 Y_out을 y_o1에 의해 편미분할 때 y_o1과 관계없는 항인 오차 y_o2는 상수가 되어 사라졌습니다. 따라서 남는 것은 뿐이었습니다. 하지만 이번에는 y_h1에 대해 미분해야 합니다. y_h1은 오차 y_o1과 오차 y_o2 의 형성에 모두 관계가 있습니다. 따라서 과 가 모두 계산되어야 하므로 계산이 다음과 같이 조금 복잡해집니다.

먼저 부분을 보겠습니다. 체인 룰에 의해 다음과 같이 바뀝니다.

이 중 -1 부분을 다시 미분하면 역시 체인 룰에 의해 다음과 같이 바뀝니다.