레플리
글 수 282

딥러닝으로 욕설 탐지하기

조회 수 1880 추천 수 0 2018.08.06 19:14:25
깊은바다 *.68.247.188


 

http://ndc.vod.nexoncdn.co.kr/NDC2018/slides/NDC2018_0033/index.html

 

 

 

NDC2018에 발표되었던 것으로 딥러닝으로 욕설을 탐지하는 방법을 설명하고 있습니다. 예전에 관련 기사를 소개한 적이 있었는데 최근에 발표자료가 공개되었습니다.

 

지금까지 유저들의 욕설을 방지하기 위해서는 금칙어를 검사하는 것이 보통이었습니다. 하지만 단어를 변형하거나 중간에 숫자를 넣는 등 우회할 방법이 다양하기 때문에 그리 효과적이지 않았습니다. 또한 '경제개발5개년계획'처럼 욕설로 오탐하는 경우도 많았습니다.

 

딥러닝의 CNN을 사용하여 새로운 욕설 탐지기를 개발하였는데, 문맥의 의미나 단어의 패턴을 정확하게 판단하기 때문에 90%의 정확도를 보인다고 합니다. 먼저 프로그램으로 한번 문장을 거르고 욕설일 확률이 높은 것만 따로 검토하여 운영자의 부담이 상당히 줄어들었습니다. 앞으로 대부분의 게임이나 웹서비스에서 이런 기술이 사용될 것이라 생각합니다.

 

 

이 게시물을
엮인글 :
목록
List of Articles
제목 글쓴이 날짜sort 조회 수
구글의 일상대화 딥러닝 모델 - Meena file 깊은바다 2020-01-30 1763
핑퐁의 리액션 모델 - Dialog-BERT 만들기 깊은바다 2020-01-28 1381
책 한권을 입력으로 받는 구글의 딥러닝 모델 - Reformer 깊은바다 2020-01-17 622
GPT2 텍스트 어드벤처 게임, AI Dungeon 앱 출시 깊은바다 2019-12-23 404
네이버 영화리뷰 감정분석 with Hugging Face BERT file 깊은바다 2019-12-17 4657
GPT2로 만든 텍스트 어드벤처 게임 깊은바다 2019-12-09 2007
인공지능과 함께 글쓰기! 창의 AI x Bookathon 대회 - GPT2 깊은바다 2019-11-30 581
GLUE: 벤치마크를 통해 BERT 이해하기 깊은바다 2019-11-19 1737
GPT2의 1.5B 모델 공개 깊은바다 2019-11-08 554
GPT2로 글을 작성하는 사이트 - StoryAI file 깊은바다 2019-10-11 1582
딥러닝 기반 자연어 언어모델 BERT - Colab 실습 코드 포함 file 깊은바다 2019-09-02 1179
욕설을 찾는 BERT 모델 - Purifier 깊은바다 2019-08-28 3255
딥러닝을 활용한 뉴스 메타 태깅 깊은바다 2019-08-26 379
100억건의 카카오톡 데이터로 
똑똑한 일상대화 인공지능 만들기 - 핑퐁 멀티턴 file 깊은바다 2019-08-20 1732
새로운 자연어처리 벤치마크 - SuperGLUE 깊은바다 2019-08-15 703
목록
쓰기