OpenAI가 대화전용 모델인 ChatGPT를 공개했습니다. 현재 데모버전을 무료로 사용해볼 수 있습니다. 기본적으로는 이전의 InstructGPT와 비슷한 방법으로 학습했습니다. 모델이 생성한 문장을 사람이 평가하고, 이를 강화학습으로 다시 재학습을 합니다.

ChatGPT의 가장 큰 특징은 대화를 통해 연속적으로 정보를 물어볼 수 있다는 점입니다. 보통 검색엔진은 한 번 결과가 나오면 끝입니다. 반면에 ChatGPT는 이전 결과에 대해 추가적인 질문을 계속 해서 원하는 정보를 찾을 수 있습니다. 머지않아 검색엔진이 이런 딥러닝 대화 모델로 바뀌지 않을까 생각됩니다. 영화속에 나오는 인공지능처럼요.

다른 장점은 hallucination이 훨씬 줄어들었다는 것입니다. 기존 초거대모델은 틀린 대답을 그럴 듯 하게 지어낸다는 문제가 있었습니다. ChatGPT는 자신의 한계를 인지하고 최대한 안전하게 대답을 하도록 설계되었습니다.

저도 데모 버전을 해봤는데요. 한글도 가능하지만 영어보다는 대화 품질이 많이 떨어집니다. 확실히 이전 InstuctGPT보다 좋아진 것 같습니다.

< 데모버전 >

https://chat.openai.com/chat

< 블로그 >

https://openai.com/blog/chatgpt/