레플리
글 수 72


 

https://tech.kakao.com/2022/04/14/apeach/

 

 

 

최근 초거대모델이나 일상대화 챗봇 같은 언어기반의 인공지능이 큰 주목을 받고 있습니다. 그러나 욕설이나 편향, 혐오표현을 어떻게 방지할 수 있을지가 가장 중요한 문제로 떠오르고 있습니다. 현재까지 공개된 대표적인 혐오표현 데이터셋은 다음과 같습니다.

 

< korean-hate-speech(BEEP!) >

https://github.com/kocohub/korean-hate-speech

 

< APEACH >

https://github.com/jason9693/APEACH

 

< Korean UnSmile Dataset >

https://github.com/smilegate-ai/korean_unsmile_dataset

 

 

 

이 중 APEACH가 어떻게 데이터을 수집하고 레이블링 했는지 설명한 글입니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수
APEACH – 혐오 발화 평가데이터를 만드는 새로운 방법 깊은바다 2022-04-22 1087
윈도우에서 간편하게 Mecab 설치방법 - pyeunjeon 깊은바다 2021-06-15 487
자연어처리 벤치마크 GLUE의 한글 버전인 KLUE 공개 file 깊은바다 2021-05-22 678
모두의 말뭉치에 새로운 일상 대화 추가 file 깊은바다 2021-04-06 551
자연어처리 벤치마크인 SuperGLUE도 인간의 기록을 경신 [1] 깊은바다 2021-01-21 541
한국어 문장 분리기, KSS(Korean Sentence Splitter) 파이썬 포팅 file 깊은바다 2020-12-23 6105
파이썬 한국어 말뭉치 패키지 - Korpora file 깊은바다 2020-09-12 1489
세종 말뭉치보다 9배 더 큰 한글 코퍼스 공개 - 모두의 말뭉치 file 깊은바다 2020-08-27 3119
한국어 전처리 기법 모음 깊은바다 2020-07-31 4523
예일대의 자연어-SQL 데이터셋, Spider 깊은바다 2020-07-12 513
IBM 왓슨의 자연어처리 방식 깊은바다 2020-06-26 616
매주 한편씩 글을 작성하는 자연어처리 블로그 - 위클리 NLP 깊은바다 2020-06-12 1117
인간의 언어를 이해하는 기계, NLU에는 어떤 것이 있을까? 깊은바다 2020-06-05 408
한글 자모 분리 및 합치기 파이썬 패키지 [1] 깊은바다 2020-03-03 3203
Machine Learning for Kids로 감정분석 깊은바다 2020-02-09 921