레플리
글 수 72

APEACH – 혐오 발화 평가데이터를 만드는 새로운 방법

조회 수 1110 추천 수 0 2022.04.22 12:47:12
깊은바다 *.68.249.160


 

https://tech.kakao.com/2022/04/14/apeach/

 

 

 

최근 초거대모델이나 일상대화 챗봇 같은 언어기반의 인공지능이 큰 주목을 받고 있습니다. 그러나 욕설이나 편향, 혐오표현을 어떻게 방지할 수 있을지가 가장 중요한 문제로 떠오르고 있습니다. 현재까지 공개된 대표적인 혐오표현 데이터셋은 다음과 같습니다.

 

< korean-hate-speech(BEEP!) >

https://github.com/kocohub/korean-hate-speech

 

< APEACH >

https://github.com/jason9693/APEACH

 

< Korean UnSmile Dataset >

https://github.com/smilegate-ai/korean_unsmile_dataset

 

 

 

이 중 APEACH가 어떻게 데이터을 수집하고 레이블링 했는지 설명한 글입니다.

 

이 게시물을
엮인글 :
목록
List of Articles
제목 글쓴이 날짜sort 조회 수
자연어로 빅데이터 분석 - 왓슨 애널리틱스 깊은바다 2016-03-21 732
사진을 문장으로 변환하는 구글의 새로운 기술 file 깊은바다 2016-03-25 835
자연어처리와 형태소분석의 기초 깊은바다 2016-03-31 1215
차원이 다른 구글 번역기의 도래 깊은바다 2017-02-28 427
구글 신경망 번역의 원리 깊은바다 2017-02-28 1985
네이버 번역앱 파파고 개발자 인터뷰 file 깊은바다 2017-02-28 1421
국민대 강승식 교수의 형태소 분석기 깊은바다 2017-03-24 1285
마르코프 체인을 사용한 자동 문장 생성 file 깊은바다 2017-04-05 8980
자바 형태소 분석기 open-korean-txt 깊은바다 2017-04-11 5436
형태소 분석의 이해 깊은바다 2017-05-01 1798
마르코프 체인으로 만든 p봇 깊은바다 2017-05-01 895
빠르고 성능 좋은 형태소분석기 MeCab-Ko 깊은바다 2017-05-02 4422
KoNLPy - 파이썬 한국어 NLP 깊은바다 2017-06-14 1693
문서의 카테고리를 분류할 수 있는 나이브 베이즈 알고리즘 깊은바다 2017-08-31 1884
문서에서 핵심 단어를 찾는 TF-IDF 알고리즘 file 깊은바다 2017-09-07 4258
목록
쓰기