더북(TheBook)

그림 1-1에서 볼 수 있듯이 LLM은 입력 문장을 바탕으로 여러 후보 단어를 생성한 뒤 각 단어의 등장 확률을 계산합니다. 그리고 그중 가장 높은 확률을 가진 단어를 선택합니다. 단어가 생성될 때마다 이 과정을 반복해, 하나의 문장을 완성합니다.

그림 1-1 LLM의 다음 단어 예측 과정