이때는 뒤에서부터 앞으로 값을 수정해 나가는 방법을 사용합니다. 이 방법을 사용하면 다음 그림과 같이 값을 수정해 나갑니다.

그림 6-7 뒤에서부터 앞으로 값을 수정해 나가는 방법: 오차 역전파법

오차가 있으면 경사 하강법을 사용하여 마지막부터 처음까지 되돌아가면서 각각의 가중치 값을 수정해 나갑니다. 그래서 이 방법의 이름도 오차를 끝에서부터 거꾸로 가면서 줄인다는 의미인 오차 역전파법(back propagation)입니다. 백프로파게이션, 체인룰이라고도 합니다.