레플리
글 수 282

Together가 공개한 오픈소스 LLM - OpenChatKit

조회 수 424 추천 수 0 2023.03.12 13:33:23


https://www.together.xyz/blog/openchatkit

 

 

 

Together에서 OpenChatKit를 공개했습니다. 많은 사람들이 LLM에서도 Stable Diffusion 모먼트가 오지 않을까 기대하고 있습니다. 다만 그때와 상황이 조금 다르기는 합니다. Dall-E나 Midjourney는 유료였기 때문에 무료로 풀린 Stable Diffusion이 대중적인 인기를 얻었습니다. 그러나 ChatGPT는 이미 공짜로 쓸 수 있으니 그런 메리트는 약하다고 봅니다.

 

LLM을 개인 PC에서 돌리는 게 의미가 있으려면 파인튜닝이 핵심입니다. Stable Diffusion에서도 LoRA를 사용하여 별도 데이터로 추가학습을 시킬 수 있습니다. 이러면 특정 인물이나 스타일의 그림을 생성하는게 가능합니다. 새로 학습된 LoRA를 자유롭게 교환하는 사이트도 이미 존재하고요.

 

LLM 역시 이런 수요가 존재할 것이라 생각합니다. 지금 ChatGPT는 제한이 상당히 많습니다. 최근에는 탈옥이나 부적절한 역할극을 못하도록 막아놓기도 했습니다. 만약 오픈소스 LLM에서 LoRA를 써서 내가 원하는 상대로 만들 수 있으면 어떨까요. 이런 LoRA를 다운받아서 쓸 수도 있고요. 아마 성인용으로 가장 먼저 활용되겠지만, 점차 다양한 페르소나를 가진 챗봇들이 등장할 것입니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜sort 조회 수
사진을 인식할 수 있는 ChatGPT 멀티모달 버전 공개 file 깊은바다 2023-09-26 276
Poe에 추가된 업스테이지의 LLM, Solar-70b file 깊은바다 2023-09-18 431
RAG 아키텍처를 위한 임베딩 모델의 선택에 대해 깊은바다 2023-09-14 515
LLM의 미래는 자율행동과 멀티 에이전트 깊은바다 2023-08-30 298
LLM이 서로 협력하여 프로그램을 개발 - ChatDev file 깊은바다 2023-08-16 748
GPT-4에 CoT 프롬프를 적용하여 2023 수능 국어 1등급 달성 file 깊은바다 2023-08-08 620
LLM의 창발적인 현상인 CoT(Chain of Thouht) 소개 file 깊은바다 2023-07-27 704
RAG 아키텍처의 이해 깊은바다 2023-07-23 1323
GPT-4 세부구조에 대한 정보 유출 깊은바다 2023-07-20 456
Llama 2의 RLHF 구현 방법 깊은바다 2023-07-19 714
한국어 LLM 민주화의 시작 KoAlpaca file 깊은바다 2023-07-17 1053
레포트를 써주는 LLM - GPT Researcher file 깊은바다 2023-07-13 398
LLM 챗봇의 특징 2가지 - RAG와 Function 깊은바다 2023-07-06 1191
RAG(Retrieval-Augmented Generation) - LLM의 환각을 줄이는 방법 file 깊은바다 2023-07-04 9615
Generative AI — 시장 구조, 기회, moat에 대한 몇 가지 생각 깊은바다 2023-06-27 302