레플리
글 수 284

Together가 공개한 오픈소스 LLM - OpenChatKit

조회 수 428 추천 수 0 2023.03.12 13:33:23


https://www.together.xyz/blog/openchatkit

 

 

 

Together에서 OpenChatKit를 공개했습니다. 많은 사람들이 LLM에서도 Stable Diffusion 모먼트가 오지 않을까 기대하고 있습니다. 다만 그때와 상황이 조금 다르기는 합니다. Dall-E나 Midjourney는 유료였기 때문에 무료로 풀린 Stable Diffusion이 대중적인 인기를 얻었습니다. 그러나 ChatGPT는 이미 공짜로 쓸 수 있으니 그런 메리트는 약하다고 봅니다.

 

LLM을 개인 PC에서 돌리는 게 의미가 있으려면 파인튜닝이 핵심입니다. Stable Diffusion에서도 LoRA를 사용하여 별도 데이터로 추가학습을 시킬 수 있습니다. 이러면 특정 인물이나 스타일의 그림을 생성하는게 가능합니다. 새로 학습된 LoRA를 자유롭게 교환하는 사이트도 이미 존재하고요.

 

LLM 역시 이런 수요가 존재할 것이라 생각합니다. 지금 ChatGPT는 제한이 상당히 많습니다. 최근에는 탈옥이나 부적절한 역할극을 못하도록 막아놓기도 했습니다. 만약 오픈소스 LLM에서 LoRA를 써서 내가 원하는 상대로 만들 수 있으면 어떨까요. 이런 LoRA를 다운받아서 쓸 수도 있고요. 아마 성인용으로 가장 먼저 활용되겠지만, 점차 다양한 페르소나를 가진 챗봇들이 등장할 것입니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수sort
KoGPT2 v2.0 공개 깊은바다 2021-05-03 1589
GPT2로 글을 작성하는 사이트 - StoryAI file 깊은바다 2019-10-11 1582
Java에서 Word2vec 사용하기 깊은바다 2018-05-05 1573
KoNLPy를 이용하여 Huggingface Transformers 학습하기 깊은바다 2020-09-20 1573
글쓰는 법을 배우는 신경망 깊은바다 2016-03-25 1539
딥러닝 자연어처리 라이브러리 - Pororo file 깊은바다 2021-02-03 1531
일상대화 챗봇 레플리카(Replika)의 구현 방식 file 깊은바다 2020-12-22 1510
딥러닝으로 미소녀 챗봇 만들기 깊은바다 2018-06-01 1499
챗봇의 슬롯 채우기(Slot Filling)와 DST(Dialogue State Tracking) file 깊은바다 2021-08-19 1480
GPT-3로 NPC와 대화를 할 수 있는 게임 시뮬레이터 깊은바다 2021-02-22 1464
문장의 유사성을 예측하고 평가하는 AI - 카카오 심슨 깊은바다 2019-03-20 1463
GPT가 스스로 계획을 세워서 실행한다면 - AutoGPT와 LangChain file 깊은바다 2023-04-18 1455
한국어 형태소 분석기 성능 비교 - khaiii 깊은바다 2018-12-10 1447
글자, 사진, 영상을 동시에 처리하는 딥마인드의 딥러닝 모델 - Flamingo file 깊은바다 2022-05-10 1440
문장을 사진으로 변환하는 StackGAN [1] 깊은바다 2018-09-17 1435