레플리
글 수 284

네이버 영화리뷰 감정분석 with Hugging Face BERT

조회 수 4672 추천 수 0 2019.12.17 00:25:46


padding_and_mask.png

 

https://github.com/deepseasw/bert-naver-movie-review

 

 

 

BERT는 구글이 만든 딥러닝 모델입니다. 먼저 위키피디아 같은 텍스트 코퍼스로 사전훈련을 합니다. 그다음 이 모델을 기반으로 새로운 데이터에 맞게 다시 훈련합니다. 이렇게 전이학습을 하면 훨씬 좋은 성능을 낼 수 있습니다.

 

Hugging Face가 공개한 패키지를 사용하면 BERT를 아주 쉽게 적용할 수 있습니다. 네이버 영화리뷰 데이터로 감정분석을 하는 코드를 구현해보았습니다. Colab으로 바로 실행해보실 수도 있습니다. 관심있는 분들에게 많은 도움이 되었으면 합니다.

 

 

 

< 챗봇 개발자 모임 >

- 페이스북 그룹에 가입하시면 챗봇에 대한 최신 정보를 쉽게 받으실 수 있습니다.

https://www.facebook.com/groups/ChatbotDevKR/

 

List of Articles
제목 글쓴이 날짜 조회 수sort
MS 코파일럿, 한국어 토큰수 2배에서 1.1배로 감소 file 깊은바다 2024-05-04 5
5배 싸진 클로바X의 경량화 모델 - HCX-DASH file 깊은바다 2024-04-26 40
MS의 CTO인 Kevin Scott과 OpenAI와의 협업 깊은바다 2023-03-17 82
ChatGPT 2달만에 누적 사용자 1억명 돌파 깊은바다 2023-02-03 89
ChatGPT iOS 버전 출시 file 깊은바다 2023-05-19 98
ChatGPT가 Stack Overflow를 대체할까 깊은바다 2023-02-16 105
구글의 초거대AI LaMDA, 과연 의식을 가지고 있을까 깊은바다 2023-02-17 107
클로바X의 사용량 제한 - QPM과 TPM 깊은바다 2024-04-01 108
Pi를 만든 Inflection AI, MS로 대거 이직한 이유 깊은바다 2024-03-25 119
MS의 목적은 ChatGPT로 구글이 장악한 검색시장 자체를 무너뜨리는 것 깊은바다 2023-02-11 122
ChatGPT와 대화 인공지능의 미래 깊은바다 2023-02-17 124
와튼스쿨 에단 몰릭 교수의 Bing 사용 후기 깊은바다 2023-02-19 136
딥마인드의 데미스 하사비스, AGI는 신중한 접근 필요 깊은바다 2023-03-22 147
구글, ChatGPT의 라이벌인 Bard 공개 file 깊은바다 2023-02-07 148
MS, Bing과 Edge에 ChatGPT 통합 file 깊은바다 2023-02-08 154