레플리
글 수 72

파이썬 한국어 말뭉치 패키지 - Korpora

조회 수 1489 추천 수 0 2020.09.12 16:09:04


K-001.png

 

https://github.com/ko-nlp/Korpora

 

 

 

파이썬에서는 KoNLPy 덕분에 형태소분석이 매우 편해졌습니다. Korpora는 이와 비슷하게 한국어 말뭉치들을 쉽게 쓸 수 있게 해주는 패키지입니다. 유명한 네이버 영화리뷰에서부터 챗봇 데이터, 네이버 댓글, 한국어 혐오 데이터, 나무위키 등 다양한 한국어 말뭉치들이 포함되어 있습니다. 파일을 로드하고 가공할 필요가 없기 때문에 바로 사용하실 수 있습니다. 앞으로 국내에서 대표적인 자연어처리 패키지가 되기를 기대합니다.

 

List of Articles
제목 글쓴이 날짜 조회 수sort
파이썬으로 3줄 요약기 만들기 깊은바다 2018-01-19 10805
마르코프 체인을 사용한 자동 문장 생성 file 깊은바다 2017-04-05 8959
한국어 문장 분리기, KSS(Korean Sentence Splitter) 파이썬 포팅 file 깊은바다 2020-12-23 6105
한국어 채팅 데이터로 머신러닝 하기 깊은바다 2018-04-25 6086
자연어(NLP) 처리 기초 정리 깊은바다 2018-10-22 5766
자바 형태소 분석기 open-korean-txt 깊은바다 2017-04-11 5419
한국어 자연어처리 데이터셋 - KorQuAD 깊은바다 2018-12-21 4722
WordPiece와 BPE(Byte Pair Encoding) 깊은바다 2019-06-17 4717
한국어 전처리 기법 모음 깊은바다 2020-07-31 4523
빠르고 성능 좋은 형태소분석기 MeCab-Ko 깊은바다 2017-05-02 4422
문서에서 핵심 단어를 찾는 TF-IDF 알고리즘 file 깊은바다 2017-09-07 4235
한글 NLP with Python - KoNLPy 사용법 [2] 깊은바다 2017-12-08 4028
노가다 없는 텍스트 분석을 위한 한국어 NLP 깊은바다 2018-04-26 3902
TextRank 기법을 이용한 핵심 어구 추출 및 텍스트 요약 file 깊은바다 2018-12-28 3220
한글 자모 분리 및 합치기 파이썬 패키지 [1] 깊은바다 2020-03-03 3204