레플리
글 수 281

딥러닝 질의응답 시스템인 cdQA-suite

조회 수 1141 추천 수 0 2020.03.08 23:44:32


 

https://towardsdatascience.com/how-to-create-your-own-question-answering-system-easily-with-python-2ef8abc8eb5

 

 

 

딥러닝 기반의 질의응답 시스템으로 페이스북의 DrQA(https://github.com/facebookresearch/DrQA/)가 가장 유명합니다. 이보다 좀 더 사용하기 편리한 cdQA-suite를 소개해드립니다.

 

DrQA와 동일하게 Retriever와 Reader로 구성됩니다. Retriever는 문서집합을 검색해서 질문과 가장 비슷한 문단을 찾습니다. 문장을 TF-IDF 벡터로 변환하고 유사도를 비교하는 방식입니다. 이렇게 후보 문단들을 추려낸 후, 딥러닝으로 각 문단마다 질문의 답을 선택합니다. SQuAD로 파인튜닝된 BERT 모델을 사용합니다. 마지막으로 가장 높은 확률의 답을 출력합니다.

 

일반적인 MRC(Machine Reading Comprehension) 모델은 지문과 질문을 동시에 입력으로 넣어야 합니다. 반면에 이런 QA 시스템은 질문만 하면 자동으로 지문을 검색해서 정답을 찾습니다. 그래서 실제 서비스에 적용하기가 용이합니다.

엮인글 :
List of Articles
제목 글쓴이 날짜sort 조회 수
와튼스쿨 에단 몰릭 교수의 Bing 사용 후기 깊은바다 2023-02-19 134
MS 직원의 GPT 기반 콜센터 챗봇 사용기 깊은바다 2023-02-18 157
구글의 초거대AI LaMDA, 과연 의식을 가지고 있을까 깊은바다 2023-02-17 106
ChatGPT와 대화 인공지능의 미래 깊은바다 2023-02-17 123
하이퍼클로바 기반의 심리상담 챗봇 개발 경험 깊은바다 2023-02-17 230
ChatGPT 프롬프트 엔지니어링 - 다양한 말투로 대답하기 file 깊은바다 2023-02-17 779
ChatGPT, 타임지 표지 장식 깊은바다 2023-02-17 245
ChatGPT의 3가지 핵심 특징 깊은바다 2023-02-16 156
ChatGPT가 Stack Overflow를 대체할까 깊은바다 2023-02-16 104
테드 창, ChatGPT는 엄청나게 효율이 높은 손실 압축임 깊은바다 2023-02-13 234
MS의 목적은 ChatGPT로 구글이 장악한 검색시장 자체를 무너뜨리는 것 깊은바다 2023-02-11 119
ChatGPT와 통합된 Bing 사용후기 영상 깊은바다 2023-02-10 165
MS, Bing과 Edge에 ChatGPT 통합 file 깊은바다 2023-02-08 153
구글, ChatGPT의 라이벌인 Bard 공개 file 깊은바다 2023-02-07 147
네이버의 생성AI는 챗GPT가 안 부럽다 - 심층 인터뷰 기사 깊은바다 2023-02-03 204