레플리
글 수 126

파이썬과 자연어처리

조회 수 650 추천 수 0 2018.01.03 23:54:16


x9791161750255_1.jpg

 

http://www.kyobobook.co.kr/product/detailViewKor.laf?ejkGb=KOR&mallGb=KOR&barcode=9791161750255&orderClick=LEA&Kc=#N

 

< 목차 >

- 1. 문자열을 사용한 작업 

- 2. 통계 언어 모델링 

- 3. 형태학 - 시작하기

- 4. 품사 태깅 - 단어 식별 

- 5. 파싱 - 훈련 데이터 분석 

- 6. 의미 분석 - 본질 표현 

- 7. 감정 분석 - 나는 행복하다

- 8. 정보 검색 - 정보 접속

- 9. 담화 분석 - 아는 것은 믿는 것이다

- 10. NLP 시스템의 평가 - 성능 분석

 

 

 

파이썬의 자연어처리 모듈인 NLTK(Natural Language Took Kit)의 사용법을 다루고 있습니다. 자연어처리 관련 책이 거의 없어 기대를 많이 했는데 실망스러웠습니다.

 

설명이 거의 없고 코드만 쭉 나열하고 있습니다. 코드가 어떤 역할을 하는지 알려주지도 않습니다. 아마 전체 책에서 코드만 2/3 정도인 것 같습니다.

 

그냥 자연어처리가 어떤 방식으로 이루어져 있는지 개념 정도만 파악하는게 아니라면 자세한 정보를 얻는데는 큰 도움이 되지 않을 듯 합니다.

 

 

 

전체적인 책의 내용을 요약하면 다음과 같습니다.

 

< 자연어처리 순서 >

1. 전처리 - 불용어(stop word) 및 특수기호 제거.

2. 형태소분석 - 문장을 형태소 단위로 분류. 동사의 경우 어간추출(stemming).

3. 구문분석 - 동사구, 명사구 등 문장의 구조 파악. 부사구 등 중요하지 않은 부분 제거.

4. 의미분석 - 문장의 의미 파악. 챗봇의 경우 의도(intent)와 개체(entiry) 추출 단계.

5. 담화분석 - 여러 문장 사이의 문맥을 이해.

 

< 자연어처리 활용분야 >

- 문서 분류

- 문서 요약

- 검색

- 질의응답

- 감정 분석

- 챗봇 / 음성비서

 

List of Articles
제목 글쓴이 날짜 조회 수sort
자연어 처리와 컴퓨터 언어학 file 깊은바다 2019-12-30 534
핸즈온 머신러닝 file 깊은바다 2018-11-08 536
텐서플로로 시작하는 딥러닝 file 깊은바다 2017-09-19 546
텍스트 마이닝 file 깊은바다 2018-03-20 549
파이썬을 이용한 머신러닝, 딥러닝 실전 앱 개발 file [2] 깊은바다 2019-08-12 577
한국어 임베딩 file 깊은바다 2019-12-11 583
파이썬과 케라스를 이용한 딥러닝/강화학습 주식투자 file 깊은바다 2018-07-13 593
처음 배우는 딥러닝 수학 file 깊은바다 2018-09-25 603
AI 메이커스, 인공지능 전쟁의 최전선 file 깊은바다 2022-06-04 603
텐서플로와 머신러닝으로 시작하는 자연어 처리 file 깊은바다 2019-02-28 627
EBS 수학과 함께하는 AI 기초 file 깊은바다 2020-09-15 644
파이썬과 자연어처리 file 깊은바다 2018-01-03 650
집단지성 프로그래밍 file 깊은바다 2017-08-29 685
인공지능을 위한 수학 file 깊은바다 2019-07-29 769
매출 올리는 데이터 사이언티스트 file Dfinite 2022-07-31 802