글 수 112

한국어 임베딩

조회 수 188 추천 수 0 2019.12.11 21:05:41


800.jpg

 

http://www.yes24.com/Product/Goods/78569687

 

< 목차 >

- 1. 서론
- 2. 벡터가 어떻게 의미를 가지게 되는가
- 3. 한국어 전처리
- 4. 단어 수준 임베딩
- 5. 문장 수준 임베딩
- 6. 임베딩 파인 튜닝
 

 

 

자연어처리 블로그(ratsgo.github.io)로 유명한 이기창님의 책입니다. 딥러닝에서 텍스트 기반 모델의 가장 큰 차이점은 바로 임베딩입니다. 문장을 신경망이 이해하는 벡터로 변환하여 끼워 넣는(embed) 역할을 합니다.

 

이 책에서는 크게 다음과 같은 부분으로 구성되어 있습니다. 첫째, Word2Vec, FastText, GloVe 같은 단어수준 임베딩. 둘째, Doc2Vec, ELMo, BERT 같은 문장수준 임베딩. 셋째, 사전훈련 모델을 사용하여 다른 문제에 파인튜닝하는 방법.

 

우선 이전 도서들과 달리 최신 모델들을 보여준다는 점에서 상당히 좋았습니다. 저자가 국문학과 출신이라 그런지 문장도 깔끔하고 읽기가 편했습니다. 하지만 일반적인 개념을 다룬 앞부분에 비해, 뒤로 갈수록 설명이 조금 부족한 편입니다.

 

예를 들어, <밑바닥부터 시작하는 딥러닝2>에서는 Word2Vec만 77페이지입니다. 반면에 여기서는 10페이지에 불과합니다. 물론 많은 주제를 다루기 때문에 어쩔 수 없다고 생각합니다. 다만 초보자가 처음 접하기엔 어렵다고 봅니다. 딥러닝 자연어처리에 익숙한 분들이 이론적으로 정리하기에 좋을 듯 합니다.

첨부
엮인글 :
List of Articles
제목 글쓴이 날짜sort 조회 수
외로워지는 사람들 file 깊은바다 2020-04-01 42
오토노미 제2의 이동 혁명 file 깊은바다 2020-02-23 84
다양한 봇빌더를 이용한 똑똑한 챗봇 만들기 file 깊은바다 2020-01-21 128
자연어 처리와 컴퓨터 언어학 file 깊은바다 2019-12-30 181
한국어 임베딩 file 깊은바다 2019-12-11 188
에이트 - 인공지능에게 대체되지 않는 나를 만드는 법 file 깊은바다 2019-12-10 125
안녕, 인간 file 깊은바다 2019-11-10 160
머신러닝 실무 프로젝트 file 깊은바다 2019-10-18 487
음성 사용자 인터페이스 디자인 file 깊은바다 2019-09-29 132
알파고를 분석하며 배우는 인공지능 file 깊은바다 2019-09-22 233
보이스봇 챗봇 디자인 file 깊은바다 2019-09-13 164
밑바닥부터 시작하는 딥러닝 2 file 깊은바다 2019-09-07 290
영어학습을 위한 인공지능 챗봇 활용 및 제작 file 깊은바다 2019-08-12 212
파이썬을 이용한 머신러닝, 딥러닝 실전 앱 개발 file [2] 깊은바다 2019-08-12 329
만화로 쉽게 배우는 회귀분석 file 깊은바다 2019-08-05 224