레플리
글 수 126

파이썬과 자연어처리

조회 수 650 추천 수 0 2018.01.03 23:54:16


x9791161750255_1.jpg

 

http://www.kyobobook.co.kr/product/detailViewKor.laf?ejkGb=KOR&mallGb=KOR&barcode=9791161750255&orderClick=LEA&Kc=#N

 

< 목차 >

- 1. 문자열을 사용한 작업 

- 2. 통계 언어 모델링 

- 3. 형태학 - 시작하기

- 4. 품사 태깅 - 단어 식별 

- 5. 파싱 - 훈련 데이터 분석 

- 6. 의미 분석 - 본질 표현 

- 7. 감정 분석 - 나는 행복하다

- 8. 정보 검색 - 정보 접속

- 9. 담화 분석 - 아는 것은 믿는 것이다

- 10. NLP 시스템의 평가 - 성능 분석

 

 

 

파이썬의 자연어처리 모듈인 NLTK(Natural Language Took Kit)의 사용법을 다루고 있습니다. 자연어처리 관련 책이 거의 없어 기대를 많이 했는데 실망스러웠습니다.

 

설명이 거의 없고 코드만 쭉 나열하고 있습니다. 코드가 어떤 역할을 하는지 알려주지도 않습니다. 아마 전체 책에서 코드만 2/3 정도인 것 같습니다.

 

그냥 자연어처리가 어떤 방식으로 이루어져 있는지 개념 정도만 파악하는게 아니라면 자세한 정보를 얻는데는 큰 도움이 되지 않을 듯 합니다.

 

 

 

전체적인 책의 내용을 요약하면 다음과 같습니다.

 

< 자연어처리 순서 >

1. 전처리 - 불용어(stop word) 및 특수기호 제거.

2. 형태소분석 - 문장을 형태소 단위로 분류. 동사의 경우 어간추출(stemming).

3. 구문분석 - 동사구, 명사구 등 문장의 구조 파악. 부사구 등 중요하지 않은 부분 제거.

4. 의미분석 - 문장의 의미 파악. 챗봇의 경우 의도(intent)와 개체(entiry) 추출 단계.

5. 담화분석 - 여러 문장 사이의 문맥을 이해.

 

< 자연어처리 활용분야 >

- 문서 분류

- 문서 요약

- 검색

- 질의응답

- 감정 분석

- 챗봇 / 음성비서

 

List of Articles
제목 글쓴이 날짜 조회 수sort
리얼월드 머신러닝 file 깊은바다 2018-10-20 294
가장 빨리 만나는 챗봇 프로그래밍 with Bot Framework file 깊은바다 2018-12-24 294
펭귄브로의 3분 딥러닝, 파이토치맛 file 깊은바다 2020-08-02 295
프롬프트 엔지니어링 교과서 file 깊은바다 2023-12-04 297
한 권으로 정리하는 4차산업혁명 file 깊은바다 2018-07-06 300
머신 러닝 워크북 file 깊은바다 2018-04-14 304
마스터 알고리즘 file [1] 깊은바다 2017-03-05 314
아무것도 모르고 시작하는 인공지능 첫걸음 file 깊은바다 2018-08-16 319
보이스봇 챗봇 디자인 file 깊은바다 2019-09-13 333
영어학습을 위한 인공지능 챗봇 활용 및 제작 file 깊은바다 2019-08-12 336
자율주행혁명 file 깊은바다 2018-01-18 337
외로워지는 사람들 file 깊은바다 2020-04-01 338
인공지능 개론 file 깊은바다 2016-03-25 339
다양한 봇빌더를 이용한 똑똑한 챗봇 만들기 file 깊은바다 2020-01-21 339
챗봇 혁명 file 깊은바다 2017-09-11 342