레플리
글 수 282

Together가 공개한 오픈소스 LLM - OpenChatKit

조회 수 424 추천 수 0 2023.03.12 13:33:23


https://www.together.xyz/blog/openchatkit

 

 

 

Together에서 OpenChatKit를 공개했습니다. 많은 사람들이 LLM에서도 Stable Diffusion 모먼트가 오지 않을까 기대하고 있습니다. 다만 그때와 상황이 조금 다르기는 합니다. Dall-E나 Midjourney는 유료였기 때문에 무료로 풀린 Stable Diffusion이 대중적인 인기를 얻었습니다. 그러나 ChatGPT는 이미 공짜로 쓸 수 있으니 그런 메리트는 약하다고 봅니다.

 

LLM을 개인 PC에서 돌리는 게 의미가 있으려면 파인튜닝이 핵심입니다. Stable Diffusion에서도 LoRA를 사용하여 별도 데이터로 추가학습을 시킬 수 있습니다. 이러면 특정 인물이나 스타일의 그림을 생성하는게 가능합니다. 새로 학습된 LoRA를 자유롭게 교환하는 사이트도 이미 존재하고요.

 

LLM 역시 이런 수요가 존재할 것이라 생각합니다. 지금 ChatGPT는 제한이 상당히 많습니다. 최근에는 탈옥이나 부적절한 역할극을 못하도록 막아놓기도 했습니다. 만약 오픈소스 LLM에서 LoRA를 써서 내가 원하는 상대로 만들 수 있으면 어떨까요. 이런 LoRA를 다운받아서 쓸 수도 있고요. 아마 성인용으로 가장 먼저 활용되겠지만, 점차 다양한 페르소나를 가진 챗봇들이 등장할 것입니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜sort 조회 수
클로바X의 사용량 제한 - QPM과 TPM 깊은바다 2024-04-01 85
Pi를 만든 Inflection AI, MS로 대거 이직한 이유 깊은바다 2024-03-25 105
LLaMA나 Mistral이 계속 무료로 유지될 수 있을까 깊은바다 2024-03-05 232
GPT-3.5와 클로바X 가격 비교 file 깊은바다 2024-02-25 263
OpenAI, 성능은 높아지고 가격은 싸진 새로운 모델 공개 file 깊은바다 2024-01-26 319
AI 휴대용 기기 R1을 만든 Rabbit의 대표 Jesse Lyu 깊은바다 2024-01-12 246
화면을 보고 스마트폰 앱 사용방법을 배우는 모델 - AppAgent file 깊은바다 2024-01-08 300
LLM의 새로운 기법 - Merge와 DPO file 깊은바다 2024-01-02 1123
업스테이지 SOLAR 10.7B에서 사용한 DUS 모델 확장 방법 file 깊은바다 2023-12-27 446
죽은 아들의 AI 아바타를 만든 중국의 부모 file 깊은바다 2023-12-21 179
Private sLLM - 어떻게 만들고 어떻게 배포할까? file 깊은바다 2023-12-18 349
GPT-4가 내 여자친구보다 나를 더 잘 알까? file 깊은바다 2023-12-12 166
FSM과 생성 에이전트의 차이점 깊은바다 2023-11-22 180
RAG를 사용한 페르소나 챗봇 - ChatHaruhi file 깊은바다 2023-10-17 690
LLM Multi Agent: Customer Service를 기깔나게 자동화하는 방법 file [1] 깊은바다 2023-10-09 633