레플리
글 수 295

한국어로 대화하는 생성 모델의 학습을 위한 여정 - Transformer와 GPT2

조회 수 3605 추천 수 0 2020.08.13 14:39:00
깊은바다 *.68.248.98


 

 

https://blog.pingpong.us/generation-model/

 

 

 

핑퐁팀에서 카톡 대화 데이터셋을 가지고 생성 모델을 만든 경험담입니다. Meena처럼 인코더/디코더의 Transformer와 디코더만 사용하는 GPT2 방식으로 테스트했습니다. 조만간 실제 서비스에도 적용한다니 기대가 됩니다.

 

이 게시물을
엮인글 :
목록
List of Articles
제목 글쓴이 날짜 조회 수
네이버의 초거대모델인 HyperCLOVA 논문 file 깊은바다 2021-09-13 607
챗봇의 슬롯 채우기(Slot Filling)와 DST(Dialogue State Tracking) file 깊은바다 2021-08-19 1846
죽은 약혼자를 챗봇으로 살려낸 남자 - Project December 깊은바다 2021-07-27 645
인터넷 검색을 하고 장기기억을 저장하는 페이스북의 챗봇 - Blenderbot 2 file 깊은바다 2021-07-19 815
GPT-3 데모 사이트 - gpt3demo.com 깊은바다 2021-07-13 3804
6B 파라미터의 GPT-J_6B 오픈소스 모델 깊은바다 2021-07-01 5892
GPT-3를 활용하여 주석을 코드로 바꿔주는 GitHub Copilot 깊은바다 2021-06-30 423
구글의 딥러닝 대화 모델 - LaMDA 깊은바다 2021-06-13 643
일상대화 딥러닝 모델들을 쉽게 실행할 수 있는 Openchat 깊은바다 2021-06-01 632
GPT-3를 사용하여 코딩을 하는 MS의 파워FX 깊은바다 2021-06-01 304
텍스트 스타일을 바꾸는 딥러닝 기술 깊은바다 2021-06-01 499
KoGPT2 v2.0 공개 깊은바다 2021-05-03 1653
이루다 같은 챗봇은 어떤 원리로 작동하는 걸까? 깊은바다 2021-04-03 1831
이성에게 말을 거는 작업멘트를 GPT-3로 생성 file 깊은바다 2021-03-24 643
GPT-3로 NPC와 대화를 할 수 있는 게임 시뮬레이터 깊은바다 2021-02-22 1519
목록
쓰기