더북(TheBook)

▲ 그림 2-3 전이 학습과 파인튜닝

참고

다음 URL에 챗GPT로 파인튜닝하는 방법이 자세히 설명되어 있습니다.

https://platform.openai.com/docs/guides/fine-tuning/preparing-your-dataset

이 책에서는 파인튜닝 방법을 자세히 설명하지 않을 예정인데, 그 이유는 다음과 같습니다.

1. 이미 만들어진 LLM에 추가 학습만 진행하면 된다고 하지만 어느 정도의 데이터로 어느 정도의 훈련을 시켜야 기대하는 성능(정확도)을 얻을 수 있을지 누구도 확신할 수 없습니다. 예를 들어 어느 누구도 ‘1TB의 데이터로 학습을 시키면 기대하는 성능이 나온다’라고 말할 수 없는 것이죠.

신간 소식 구독하기
뉴스레터에 가입하시고 이메일로 신간 소식을 받아 보세요.