레플리
글 수 220

안녕하세요 seq2seq에 대한 질문 있습니다...

조회 수 203 추천 수 0 2018.05.31 12:32:10


안녕하세요 저는 현재 seq2seq를 이용하여 문단에서 특정 내용을 추출하여 문장을 생성하는 것을 러닝을 통해 시도해 보고자 하는 학생입니다. 새로운 문단을 통해 문장을 생성하려고 하니 원하는 문장을 추출하는데 막혀서 질문을 올리게 되었습니다..
가령 1번문단에서 1번의 문장을 추출하였고 2번문단에서 2번의 문장을 추출하는 과정의 반복을 통해 1000번문단에서 1000번의 문장까지 추출한 데이터를 통해 학습을 시켰을 때 테스트를 위해 1001번문장을 넣어주었을 때 알맞은 1001번의 문장이 나오도록 해주려면 이 1000개의 학습데이터 수를 단지
10000 혹은 그 이상으로 수만 증가시켜도
되는 것인가요, 아니면 테스트에 활용되는 문단에서 사용되는 단어가 들어있는 문단들을 위주로 더 학습을 시켜야 하는 것인가요...
엮인글 :

깊은바다

2018.05.31 12:53:46
*.68.247.188

https://ratsgo.github.io/natural%20language%20processing/2017/03/12/s2s/

 

이걸 참조해보시는게 좋을 것 같네요. 테스트에 활용되는 문장들 위주로 학습하는건 안될 것 같습니다. 그렇게 하면 일반적인 문장에서 결과가 잘 안나올테니까요. 링크에서도 나와있다시피 문서요약을 Seq2Seq로 하는건 성능이 좋지 않다고 합니다. 번역 같은 경우 거의 1:1 대응이 될 정도로 의미가 일치하지만, 요약은 너무 범위가 넓기 때문인 것 같습니다. 

jjdh

2018.06.11 19:36:46
*.246.242.115

답변 감사합니다. 

제가 추출하려는게 문단에서 주된 일정을 찾아보려고 하는 건데요.

혹시 특정 좁은 주제(제한된 조건)에서라도 축소해서 해보려고 하면 테스트에 활용되는 문장들 위주로 학습하는 것이 도움이 될까요. 결국에는 러닝시에 요약 결과는 학습된 데이터들의 결과 중 하나가 나오게 되는데 이에 대해 원하는 결과가 나오려면 테스트 데이터가 학습이 되어있지 않고서는 나오기가 어려울 것 같아서요. 이렇게 되면 러닝을 이용해서 작성하는 것보다 알고리즘을 통한 추출이 정확도가 좀더 높게 나올 수도 있을 것 같고...

List of Articles
제목 글쓴이 날짜 조회 수
카톡 대화를 학습하는 AI 아바타 챗봇 - 레플리 file 깊은바다 2024-01-17 306
AI 개발자, 데이터과학자 모임 오픈 채팅방 링크 공유 Dfinite 2022-07-23 801
kaggle 사이트 관련 [1] gat 2022-06-21 1022
카카오톡 오픈채팅방 문의 [1] 외계공룡 2022-06-19 882
챗봇 빌더와 챗봇 모델을 사용하여 직접 개발하는 방법의 차이점은 무엇인가요? [1] 에이아이 2022-06-17 888
해당 기술에 대해 궁금합니다. 아까그분 2022-06-14 448
안녕하세요. 잘부탁드려요~!!! [1] jungjunn 2022-03-31 1568
메타, 메타버스 개발용 AI '빌더 봇' 선봬 깊은바다 2022-02-26 806
Yolov5 디바이스 사양 추천 부탁드립니다. rhee 2022-02-14 788
일상대화 챗봇 기반 메타버스 플랫폼을 만드실 백엔드 개발자 모집 깊은바다 2022-01-12 456
word2vec 질문입니다. [1] 노력하는돌 2021-09-13 1152
안녕하세요. 제가 속해있는 회사에서 딥러닝 엔지니어를 채용합니다. 깊은바다 2021-08-02 1047
딥러닝에 대한 질문드려용 [1] 병쥐 2021-05-17 222
GPT-3를 사용한 AI Dungeon, 문장 필터링에 문제 발생 깊은바다 2021-05-07 293
최근에 KoGpt2 모델 써보신분 있으신가요? [2] 안녕하세영 2021-04-15 616
기존 RNN, Transformer 보다 강력한 시계열 망 입니다. 가을전설 2021-04-08 260