더북(TheBook)

망각 게이트와 입력 게이트의 이전 단계 셀 정보를 계산하여 현재 단계의 셀 상태(cell state)를 업데이트합니다. 다음은 셀에 대한 수식입니다.

그림으로는 다음과 같이 표현할 수 있습니다.

▲ 그림 7-16

 

출력 게이트

출력 게이트(output gate)는 과거 정보와 현재 데이터를 사용하여 뉴런의 출력을 결정합니다. 이전 은닉 상태(hidden state)t번째 입력을 고려해서 다음 은닉 상태를 계산합니다. 그리고 LSTM에서는 이 은닉 상태가 그 시점에서의 출력이 됩니다.

신간 소식 구독하기
뉴스레터에 가입하시고 이메일로 신간 소식을 받아 보세요.