레플리
글 수 282

네이버 영화리뷰 감정분석 with Hugging Face BERT

조회 수 4662 추천 수 0 2019.12.17 00:25:46


padding_and_mask.png

 

https://github.com/deepseasw/bert-naver-movie-review

 

 

 

BERT는 구글이 만든 딥러닝 모델입니다. 먼저 위키피디아 같은 텍스트 코퍼스로 사전훈련을 합니다. 그다음 이 모델을 기반으로 새로운 데이터에 맞게 다시 훈련합니다. 이렇게 전이학습을 하면 훨씬 좋은 성능을 낼 수 있습니다.

 

Hugging Face가 공개한 패키지를 사용하면 BERT를 아주 쉽게 적용할 수 있습니다. 네이버 영화리뷰 데이터로 감정분석을 하는 코드를 구현해보았습니다. Colab으로 바로 실행해보실 수도 있습니다. 관심있는 분들에게 많은 도움이 되었으면 합니다.

 

 

 

< 챗봇 개발자 모임 >

- 페이스북 그룹에 가입하시면 챗봇에 대한 최신 정보를 쉽게 받으실 수 있습니다.

https://www.facebook.com/groups/ChatbotDevKR/

 

List of Articles
제목 글쓴이 날짜 조회 수
클로바X의 사용량 제한 - QPM과 TPM 깊은바다 2024-04-01 92
Pi를 만든 Inflection AI, MS로 대거 이직한 이유 깊은바다 2024-03-25 109
LLaMA나 Mistral이 계속 무료로 유지될 수 있을까 깊은바다 2024-03-05 236
GPT-3.5와 클로바X 가격 비교 file 깊은바다 2024-02-25 267
OpenAI, 성능은 높아지고 가격은 싸진 새로운 모델 공개 file 깊은바다 2024-01-26 321
AI 휴대용 기기 R1을 만든 Rabbit의 대표 Jesse Lyu 깊은바다 2024-01-12 247
화면을 보고 스마트폰 앱 사용방법을 배우는 모델 - AppAgent file 깊은바다 2024-01-08 300
LLM의 새로운 기법 - Merge와 DPO file 깊은바다 2024-01-02 1137
업스테이지 SOLAR 10.7B에서 사용한 DUS 모델 확장 방법 file 깊은바다 2023-12-27 452
죽은 아들의 AI 아바타를 만든 중국의 부모 file 깊은바다 2023-12-21 180
Private sLLM - 어떻게 만들고 어떻게 배포할까? file 깊은바다 2023-12-18 352
GPT-4가 내 여자친구보다 나를 더 잘 알까? file 깊은바다 2023-12-12 166
FSM과 생성 에이전트의 차이점 깊은바다 2023-11-22 183
RAG를 사용한 페르소나 챗봇 - ChatHaruhi file 깊은바다 2023-10-17 706
LLM Multi Agent: Customer Service를 기깔나게 자동화하는 방법 file [1] 깊은바다 2023-10-09 640