글 수 64

예일대의 자연어-SQL 데이터셋, Spider

조회 수 111 추천 수 0 2020.07.12 17:39:03


Image for post

 

https://yale-lily.github.io/spider

 

 

 

보통 목적지향 챗봇은 먼저 문장에서 의도와 개체를 추출합니다. 그리고 각 의도에 맞는 함수를 코드로 구현합니다. 파라미터로 받은 개체 정보를 사용해서 API를 호출하거나 DB와 연동하는 등 적절한 동작을 수행합니다. 만약 딥러닝을 통해 End2End 방식으로 만들려면, 그 과정을 사람이 프로그래밍하지 않고 자동화할 필요가 있습니다.

 

예일대에서 공개한 Spider는 자연어-SQL 데이터셋입니다. 텍스트로 질문을 하면 거기에 맞는 SQL을 보여줍니다. 리더보드도 운영하고 있는데, 지금은 BERT 계열이 상위권을 차지하고 있습니다. 과연 이런 노력이 End2End 목적지향 챗봇으로 이어질 수 있을까요. 당분간은 쉽지 않은 길인 것 같습니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수
한국어 전처리 기법 모음 깊은바다 2020-07-31 92
예일대의 자연어-SQL 데이터셋, Spider 깊은바다 2020-07-12 111
IBM 왓슨의 자연어처리 방식 깊은바다 2020-06-26 128
매주 한편씩 글을 작성하는 자연어처리 블로그 - 위클리 NLP 깊은바다 2020-06-12 268
인간의 언어를 이해하는 기계, NLU에는 어떤 것이 있을까? 깊은바다 2020-06-05 113
한글 자모 분리 및 합치기 파이썬 패키지 [1] 깊은바다 2020-03-03 725
Machine Learning for Kids로 감정분석 깊은바다 2020-02-09 350
파이썬과 커뮤니티와 한국어 오픈데이터 - KoNLPy의 탄생배경 깊은바다 2019-11-11 510
검색을 통해 지식그래프를 바로 생성하는 알고리즘 file 깊은바다 2019-08-02 1434
NLTK 개발자들이 직접 쓴 자연어처리 책의 공개 버전 깊은바다 2019-07-02 876
WordPiece와 BPE(Byte Pair Encoding) 깊은바다 2019-06-17 1781
스마트 스피커에서의 음악 재생 발화 오류 교정 file 깊은바다 2019-03-28 244
한국어 MRC 연구를 위한 표준 데이터셋(KorQuAD) 소개 및 B2B를 위한 MRC 연구 사례 깊은바다 2019-03-10 702
메이템 가상비서 앱 자연어처리 모듈 개발 file [1] 깊은바다 2019-01-31 588
토론하는 인공지능 - IBM Project Debater file 깊은바다 2019-01-16 412