모두의 한국어 텍스트 분석 with 파이썬: 3 n-gram: 앞뒤 단어 묶어서 사용 - 1

더북(TheBook)

모두의 한국어 텍스트 분석 with 파이썬

더북(TheBook)

Home 1장 코랩 시작하기 LESSON OT 들어가며 LESSON 01 코랩 실행하기 1 주석 2 단축키 LESSON 02 코랩에서 실습 코드 열기 1 코랩 테마 2장 파이썬에서 문자열 다루기 LESSON OT 들어가며 LESSON 01 문자열 실습 전에 LESSON 02 문자열 실습 1 문자열 표현 2 오류 처리 3 표현 방법 + 오류 처리 LESSON 03 문자열을 다루는 여러 방법 1 변수 2 인덱싱 3 슬라이싱 4 문자열의 길이, 단어 수 5 문자열 함수 6 반복 7 함수 8 문자열 내장 메서드 목록 3장 라이브러리 다루기 LESSON OT 들어가며 LESSON 01 판다스 1 데이터 프레임과 시리즈 이해하기 2 str 접근자로 문자열 다루기 LESSON 02 넘파이 1 넘파이 배열 이해하기 2 맷플롯립으로 넘파이 배열 시각화하기 4장 단어 가방 모형과 TF-IDF LESSON OT 들어가며 LESSON 01 단어 가방 모형 1 단어 가방 모형을 만드는 방법 2 단어 가방 모형 만들기 3 n-gram: 앞뒤 단어 묶어서 사용 4 min_df와 max_df: 빈도수 설정 5 max_features: 학습 단어 개수 제한 6 stop_words: 불용어 제거 7 analyzer: 문자, 단어 단위 설정 LESSON 02 TF-IDF 1 TF-IDF 가중치를 적용하는 방법 5장 연합뉴스 타이틀 주제 분류 LESSON OT 들어가며 LESSON 01 데이터 선택하기 LESSON 02 분류 과정 LESSON 03 분류를 위한 기본 설정 1 라이브러리 불러오기 2 시각화를 위한 폰트 설정 LESSON 04 데이터 불러오기 LESSON 05 데이터 전처리하기 1 데이터 전처리를 위한 데이터 병합 2 정답값 빈도수 확인 3 문자 길이 확인 4 맷플롯립과 시본을 이용해 히스토그램으로 시각화 5 주제별 글자와 단어의 빈도 확인 LESSON 06 문자 전처리하기 1 숫자 제거 2 영문자는 모두 소문자로 변경 3 형태소 분석기로 조사, 어미, 구두점 제거 4 불용어 제거 LESSON 07 학습, 시험 데이터 세트 분리하기 LESSON 08 단어 벡터화하기 LESSON 09 학습과 예측하기 1 랜덤 포레스트 분류기 2 교차 검증 3 학습 LESSON 10 답안지 불러오기 6장 국민청원 데이터 시각화와 분류 LESSON OT 들어가며 LESSON 01 분석 과정 LESSON 02 분석을 위한 기본 설정 1 라이브러리 불러오기 LESSON 03 판다스로 데이터 불러오기 1 구글 드라이브에 파일 다운로드 2 다운로드한 데이터 살펴보기 3 결측치가 있는지 확인하기 LESSON 04 판다스 데이터 분석과 시각화 1 답변 대상 청원 열 추가 2 청원 기간별 분석 3 청원 기간과 분야별 분석 4 시각화 LESSON 05 soynlp로 워드클라우드 그리기 1 라이브러리와 데이터 2 토큰화 3 텍스트 데이터 전처리 4 워드클라우드 그리기 5 명사만 추출해 시각화 LESSON 06 머신러닝으로 국민청원 데이터 이진 분류하기 1 지도학습과 데이터 세트 분리 2 이진 분류 대상 정하기 3 평균을 기준으로 투표수 예측하기 4 전처리하기 5 학습 세트와 시험 세트 만들기 6 단어 벡터화하기 7 TF-IDF 가중치 적용하기 8 LightGBM으로 학습시키기 9 평가하기 10 예측하기 11 예측 결과의 정확도 평가하기 7장 ‘120다산콜재단’ 토픽 모델링과 RNN, LSTM LESSON OT 들어가며 LESSON 01 분석 과정 LESSON 02 잠재 디리클레 할당으로 토픽 분류하기 1 라이브러리 설치 및 데이터 불러오기 2 단어 벡터화하기 3 잠재 디리클레 할당 적용하기 4 pyLDAvis를 통한 시각화하기 5 유사도 분석하기 LESSON 03 순환 신경망으로 텍스트 분류하기 1 라이브러리와 데이터 불러오기 2 학습/시험 데이터 세트 분리하기 3 레이블값을 행렬 형태로 만들기 4 벡터화하기 5 패딩하기 LESSON 04 모델 만들기 1 Bidirectional LSTM 2 모델 컴파일하기 3 학습하기 4 예측하기 5 평가하기 8장 인프런 이벤트 댓글 분석 LESSON OT 들어가며 LESSON 01 분석 과정 LESSON 02 분석을 위한 기본 설정 1 라이브러리 불러오기 2 데이터 불러오기 LESSON 03 데이터 전처리 1 중복된 글 제거하기 2 소문자로 변환하기 LESSON 04 문자열 분리로 ‘관심강의’ 분리하기 LESSON 05 벡터화하기 LESSON 06 TF-IDF로 가중치를 주어 벡터화하기 LESSON 07 군집화하기 1 KMeans 2 MiniBatchKMeans 3 클러스터 예측 평가하기 4 실루엣 계수 분석하기 9장 ChatGPT를 사용한 문장 생성 자동화 LESSON OT 들어가며 LESSON 01 생성 모델의 개념 LESSON 02 생성 모델의 파라미터 크기와 종류 LESSON 03 ChatGPT 사용하기 LESSON 04 한국어 생성 서비스: 뤼튼

그림 4-2 | n-gram

추천 도서와 신규 콘텐츠를 먼저 받아보세요

엄선한 추천 도서와 신규 콘텐츠를 이메일로 보내드립니다.
새로운 책이 등록될 때마다 소식을 받아보세요.

모두의 한국어 텍스트 분석 with 파이썬(이하 '책')의 저작권은 박조은, 송영숙에게 있습니다.
책의 출판권 및 배타적발행권과 전자책의 배타적전송권은 (주)도서출판 길벗에 있습니다.
책의 내용을 복제하여 블로그, 웹사이트 등에 게시할 수 없습니다.
- 링크 및 SNS 공유는 허용합니다.
책의 내용을 변경할 수 없습니다.
책의 내용을 상업적으로 사용할 수 없습니다.
책의 내용을 어떠한 형태로든 재배포할 수 없습니다.

TheBook by Gilbut | 오류 신고 및 문의

| 서비스 약관 | 개인정보취급방침