레플리
글 수 72

파이썬 한국어 말뭉치 패키지 - Korpora

조회 수 1510 추천 수 0 2020.09.12 16:09:04


K-001.png

 

https://github.com/ko-nlp/Korpora

 

 

 

파이썬에서는 KoNLPy 덕분에 형태소분석이 매우 편해졌습니다. Korpora는 이와 비슷하게 한국어 말뭉치들을 쉽게 쓸 수 있게 해주는 패키지입니다. 유명한 네이버 영화리뷰에서부터 챗봇 데이터, 네이버 댓글, 한국어 혐오 데이터, 나무위키 등 다양한 한국어 말뭉치들이 포함되어 있습니다. 파일을 로드하고 가공할 필요가 없기 때문에 바로 사용하실 수 있습니다. 앞으로 국내에서 대표적인 자연어처리 패키지가 되기를 기대합니다.

 

List of Articles
제목 글쓴이 날짜 조회 수
APEACH – 혐오 발화 평가데이터를 만드는 새로운 방법 깊은바다 2022-04-22 1100
윈도우에서 간편하게 Mecab 설치방법 - pyeunjeon 깊은바다 2021-06-15 497
자연어처리 벤치마크 GLUE의 한글 버전인 KLUE 공개 file 깊은바다 2021-05-22 688
모두의 말뭉치에 새로운 일상 대화 추가 file 깊은바다 2021-04-06 562
자연어처리 벤치마크인 SuperGLUE도 인간의 기록을 경신 [1] 깊은바다 2021-01-21 550
한국어 문장 분리기, KSS(Korean Sentence Splitter) 파이썬 포팅 file 깊은바다 2020-12-23 6145
파이썬 한국어 말뭉치 패키지 - Korpora file 깊은바다 2020-09-12 1510
세종 말뭉치보다 9배 더 큰 한글 코퍼스 공개 - 모두의 말뭉치 file 깊은바다 2020-08-27 3141
한국어 전처리 기법 모음 깊은바다 2020-07-31 4539
예일대의 자연어-SQL 데이터셋, Spider 깊은바다 2020-07-12 525
IBM 왓슨의 자연어처리 방식 깊은바다 2020-06-26 626
매주 한편씩 글을 작성하는 자연어처리 블로그 - 위클리 NLP 깊은바다 2020-06-12 1129
인간의 언어를 이해하는 기계, NLU에는 어떤 것이 있을까? 깊은바다 2020-06-05 417
한글 자모 분리 및 합치기 파이썬 패키지 [1] 깊은바다 2020-03-03 3238
Machine Learning for Kids로 감정분석 깊은바다 2020-02-09 932