레플리
글 수 281

OpenAI가 ChatGPT를 개발할 수 있었던 이유

조회 수 175 추천 수 0 2023.02.20 16:10:14


A good interview of Steven Pinker about ChatGPT, its potential uses and limitations.

He says, as I do, that LLMs make up stuff, make stupid mistakes, and don't have common sense, because they do not possess world models

 

--------------------------------

 

얼마 전 페이스북의 AI 수장인 얀 르쿤이 위와 같은 글을 남겼습니다. 항상 느끼는 거지만 얀 르쿤은 너무 원론적인 면에 집착하는 것 같습니다. 학자 출신이라서 그렇겠지만 기업의 리더로서는 약점이라 생각합니다. 물론 현재 LLM은 실수가 많고 상식이 부족합니다. 그래도 다양한 분야에서 충분히 유용하게 사용할 수 있습니다.

 

OpenAI의 샘 알트먼은 과거 스타트업을 직접 창업하기도 했고 유명한 VC인 와이콤비네이터의 대표로 일했습니다. 그래서 실제 제품을 만들고 혁신하는 일에 중점을 둡니다. 이미 3년 전부터 GPT-3를 상용화했고 Dalle나 기타 서비스들도 API로 제공하고 있습니다. 그런 노하우들이 쌓여서 ChatGPT가 세상에 나올 수 있었습니다.

 

구글이나 페이스북은 아직 LLM을 내부적으로만 테스트하고 제품으로 출시하지 않았습니다. 물론 대기업으로서 조심스럽긴 하겠지만, 이 격차가 앞으로 계속 벌어질거라 봅니다. 그런 면에서 국내에서는 네이버가 매우 잘하고 있습니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜sort 조회 수
Poe에 추가된 업스테이지의 LLM, Solar-70b file 깊은바다 2023-09-18 414
RAG 아키텍처를 위한 임베딩 모델의 선택에 대해 깊은바다 2023-09-14 496
LLM의 미래는 자율행동과 멀티 에이전트 깊은바다 2023-08-30 291
LLM이 서로 협력하여 프로그램을 개발 - ChatDev file 깊은바다 2023-08-16 721
GPT-4에 CoT 프롬프를 적용하여 2023 수능 국어 1등급 달성 file 깊은바다 2023-08-08 592
LLM의 창발적인 현상인 CoT(Chain of Thouht) 소개 file 깊은바다 2023-07-27 670
RAG 아키텍처의 이해 깊은바다 2023-07-23 1292
GPT-4 세부구조에 대한 정보 유출 깊은바다 2023-07-20 452
Llama 2의 RLHF 구현 방법 깊은바다 2023-07-19 693
한국어 LLM 민주화의 시작 KoAlpaca file 깊은바다 2023-07-17 1016
레포트를 써주는 LLM - GPT Researcher file 깊은바다 2023-07-13 353
LLM 챗봇의 특징 2가지 - RAG와 Function 깊은바다 2023-07-06 1145
RAG(Retrieval-Augmented Generation) - LLM의 환각을 줄이는 방법 file 깊은바다 2023-07-04 9257
Generative AI — 시장 구조, 기회, moat에 대한 몇 가지 생각 깊은바다 2023-06-27 298
ChatGPT plugin와 Autonomous Agent, 그리고 새로운 패러다임의 시작 깊은바다 2023-06-27 203