레플리
글 수 284

ChatGPT로 폴 그레이엄 에세이 검색해서 대답

조회 수 251 추천 수 0 2023.03.03 12:52:30


gpt.png

 

https://github.com/mckaywrigley/paul-graham-gpt

 

 

 

폴 그레이엄은 유명한 벤처투자가로 Y Combinator를 창업하기도 했습니다. 어떤 개발자가 ChatGPT API를 사용해서 폴 그레이엄 에세이를 검색하는 서비스를 구현했습니다. 구체적인 방법은 다음과 같습니다.

  1. 폴 그레이엄의 수필을 단락으로 분리. 각 단락을 OpenAI Embeddings API를 써서 임베딩 벡터로 생성하고 DB 구축.

  2. 사용자가 질문을 하면 이와 가장 비슷한 내용의 단락을 임베딩 DB에서 찾음. 이를 위해 먼저 질문을 벡터로 변환. 질문 벡터와 임베딩 DB의 벡터를 코사인 유사도로 계산. 가장 유사도가 높은 단락을 선택.

  3. 질문과 검색한 단락을 같이 ChatGPT API에 프롬프트로 넣고 대답 생성

대부분의 웹사이트는 자체 검색엔진이 있습니다. 회사에서도 사내 정보를 제공하기 위해 검색 솔루션을 도입하기도 하는데요. 이런 분야에서 ChatGPT가 많이 활용될 것 같습니다. 위와 같은 식으로 검색 후 대답을 생성하면 훨씬 빠르고 편리하게 원하는 정보를 얻을 수 있습니다.

 

 

 

List of Articles
제목 글쓴이 날짜 조회 수sort
OpenAI Transformer GPT2로 만든 언어 모델 깊은바다 2019-02-17 2980
카카오 형태소 분석기(khaiii) 설치와 은전한닢(mecab) 형태소 분석기 비교 깊은바다 2018-12-02 2828
구글 딥러닝 자연어 처리 오픈소스 SyntaxNet file 깊은바다 2017-12-28 2784
그림으로 아주 쉽게 설명한, The Illustrated GPT-2 깊은바다 2020-08-15 2784
추론이 가능한 딥러닝인 Relational Networks [2] 깊은바다 2017-06-11 2740
Python과 Tensorflow를 활용한 AI Chatbot 개발 및 실무 적용 깊은바다 2017-08-25 2582
GPT-3를 강화학습으로 업그레이드한 InstructGPT file 깊은바다 2022-01-30 2569
오픈소스 한국어 딥러닝 챗봇 - Kochat 깊은바다 2020-07-03 2503
딥러닝을 사용하여 의도 및 엔티티를 파악하는 챗봇 소스코드 file 깊은바다 2019-06-25 2329
개체명인식 with Naver 깊은바다 2018-11-20 2320
BERT로 토익 문제를 푸는 프로젝트 file 깊은바다 2019-04-30 2283
GPT2에서 문장 생성 시 단어를 확률에 따라 선택하는 방법 깊은바다 2020-07-16 2208
소설을 생성하는 NarrativeKoGPT2 file 깊은바다 2020-06-19 2198
GPT2로 만든 텍스트 어드벤처 게임 깊은바다 2019-12-09 2010
딥러닝으로 욕설 탐지하기 깊은바다 2018-08-06 1881