레플리
글 수 284

딥러닝으로 욕설 탐지하기

조회 수 1881 추천 수 0 2018.08.06 19:14:25


 

http://ndc.vod.nexoncdn.co.kr/NDC2018/slides/NDC2018_0033/index.html

 

 

 

NDC2018에 발표되었던 것으로 딥러닝으로 욕설을 탐지하는 방법을 설명하고 있습니다. 예전에 관련 기사를 소개한 적이 있었는데 최근에 발표자료가 공개되었습니다.

 

지금까지 유저들의 욕설을 방지하기 위해서는 금칙어를 검사하는 것이 보통이었습니다. 하지만 단어를 변형하거나 중간에 숫자를 넣는 등 우회할 방법이 다양하기 때문에 그리 효과적이지 않았습니다. 또한 '경제개발5개년계획'처럼 욕설로 오탐하는 경우도 많았습니다.

 

딥러닝의 CNN을 사용하여 새로운 욕설 탐지기를 개발하였는데, 문맥의 의미나 단어의 패턴을 정확하게 판단하기 때문에 90%의 정확도를 보인다고 합니다. 먼저 프로그램으로 한번 문장을 거르고 욕설일 확률이 높은 것만 따로 검토하여 운영자의 부담이 상당히 줄어들었습니다. 앞으로 대부분의 게임이나 웹서비스에서 이런 기술이 사용될 것이라 생각합니다.

 

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수sort
BERT를 이용한 챗봇 구현 file 깊은바다 2019-01-07 4113
GPT-3 데모 사이트 - gpt3demo.com 깊은바다 2021-07-13 3707
한국어 자연어처리를 위한 딥러닝 깊은바다 2018-02-14 3652
하이퍼클로바 활용예 및 사용가이드 file 깊은바다 2022-03-05 3570
한국어로 대화하는 생성 모델의 학습을 위한 여정 - Transformer와 GPT2 깊은바다 2020-08-13 3566
KoGPT2를 파인튜닝하여 만든 챗봇 깊은바다 2020-06-23 3528
구글의 딥러닝 대화 알고리즘 깊은바다 2016-03-25 3356
여러 한국어 GPT 모델들 file [1] 봄눈 2021-11-21 3338
네이버 영화 리뷰 감정 분석 깊은바다 2018-09-07 3293
욕설을 찾는 BERT 모델 - Purifier 깊은바다 2019-08-28 3272
딥러닝으로 챗봇 만들기 깊은바다 2017-05-03 3173
네이버의 초거대모델인 하이퍼클로바 사용 후기 깊은바다 2022-02-14 3171
6B 파라미터의 GPT-J_6B 오픈소스 모델 깊은바다 2021-07-01 3149
케라스로 만든 한글 Seq2Seq 챗봇 소스코드 깊은바다 2019-07-13 3091
구글의 Transformer 신경망 모델 [2] 깊은바다 2018-10-13 3022