레플리
글 수 72


K-001.png

 

https://songys.github.io/2019LangCon/data/smartspeaker2.pdf?fbclid=IwAR0ZkXX0O93yA3bWgmILk3fxIm8U33e-qLhtXX3tOWNqTKfh7VsHK2cJQsE

 

 

 

카카오미니에서 음성인식으로 변환한 텍스트의 오류를 어떻게 교정하는지 설명한 자료입니다. 예를 들어, '트와이스의 wild love 틀어줘'라고 인식했다면 '가수명->트와이스', '곡명->wild love'라고 엔티티를 추출합니다. 하지만 실제 곡명인 'what is love'로 수정해야 정확한 음악을 들려줄 수 있습니다.

 

이를 위해 먼저 전체, 가수명, 곡명에 따라 모든 데이터와 비교하여 총 16개의 유사도를 구합니다. 여기서 단순히 16개 유사도의 합이 가장 높은 곡을 선택하면 안됩니다. 각 유사도마다 가중치를 조절해야 하기 때문입니다.

 

바로 여기에서 학습이 사용됩니다. 16개의 유사도가 입력으로 들어가고 '교정/비교정'으로 출력이 나옵니다. 사람이 직접 라벨을 달은 데이터를 기반으로 랜덤 포레스트 모델로 학습을 했다고 합니다. 이진 출력이 확률로 나오기 때문에 아마 가장 높은 출력값이 나온 것을 정답으로 선택하지 않았을까 합니다.

 

 

 

< 엔티티 추출 >
트와이스 / wild love

 

< 오류 교정 >
트와이스 / what is love -> 0.8 (정답!)
트와이스 / I love you baby -> 0.6
아이유 / love attack -> 0.4

List of Articles
제목 글쓴이 날짜 조회 수sort
세종 말뭉치보다 9배 더 큰 한글 코퍼스 공개 - 모두의 말뭉치 file 깊은바다 2020-08-27 3165
노가다 없이 한국어 뉴스/댓글 데이터 분석하기 깊은바다 2018-10-30 3096
검색을 통해 지식그래프를 바로 생성하는 알고리즘 file 깊은바다 2019-08-02 3053
한국어 오픈소스 자연어처리 라이브러리 - Koshort 깊은바다 2018-05-20 2939
단어 간 유사도 파악 방법 깊은바다 2018-02-01 2855
개인 성격 분석(Watson Personality Insights) 데모 file 깊은바다 2017-10-02 2812
네이버 사용자를 만족시켜라 - 의도파악과 의미검색 깊은바다 2018-01-28 2664
텍스트 분석을 자동으로 해주는 서비스 - KoALA 깊은바다 2018-10-31 2088
구글 신경망 번역의 원리 깊은바다 2017-02-28 1985
자연어처리의 개념 깊은바다 2018-03-24 1930
문서의 카테고리를 분류할 수 있는 나이브 베이즈 알고리즘 깊은바다 2017-08-31 1884
형태소 분석의 이해 깊은바다 2017-05-01 1798
KoNLPy - 파이썬 한국어 NLP 깊은바다 2017-06-14 1693
파이썬 한국어 말뭉치 패키지 - Korpora file 깊은바다 2020-09-12 1513
SentiWordNet과 감성분석 깊은바다 2018-06-04 1456