더북(TheBook)

▲ 그림 4-19 중복 데이터 조회 결과

해당 쿼리를 실행한 결과 (InvoiceNo, StockCode) 조합이 총 9,694쌍 중복되어 있다는 사실을 알 수 있었습니다. 꽤 많은 수의 중복이 발견되었기에 데이터 수집 과정에 문제가 있었는지 점검해 볼 필요가 있습니다. 어떤 행들이 반복되고 있는지 분석하는 것은 데이터 탐색의 중요한 시작점이 됩니다.

중복된 행이 모든 컬럼 값까지 완전히 동일하다면 가장 간단한 DISTINCT나 ROW_NUMBER를 사용해 중복을 제거해야 합니다. 이쯤에서 다시 챗GPT에 이렇게 질문해 볼 수 있습니다.