레플리
글 수 211

ChatGPT와 Stable Diffusion으로 만든 가상 와이프

조회 수 691 추천 수 0 2023.01.13 14:39:44


예전에 GPT-3와 Stable Diffusion으로 그림일기를 그려주는 서비스를 소개한 적이 있습니다.

 

http://aidev.co.kr/deeplearning/11931

 

 

 

이와 비슷하게 어떤 개발자가 ChatGPT와 Stable Diffusion을 결합하여 가상 와이프를 만들었습니다. 구체적인 방법은 다음과 같습니다.

 

첫째, ChatGPT에게 성격을 부여합니다. ChatGPT는 대답이 단조롭다는 단점이 있습니다. 그래서 애니메 캐릭터로 롤플레이를 하자는 프롬프트를 먼저 입력합니다. 자신과 로맨틱한 관계에 있다는 사실과 그 밖의 배경스토리를 추가합니다.

 

K-005.png

 

 

 

둘째, 내가 한 말을 STT로 텍스트 변환 후 ChatGPT에 입력합니다. 그 대답 부분만 추출해서 음성합성으로 들려줍니다. 예를 들어, "버거킹에 가서 햄버거 먹자"라고 하면 "버거킹 좋아! 가서 햄버거하고 감자튀김 먹자. 맛있겠다~"라고 대답합니다.

 

K-007.png
 

 

 

셋째, ChatGPT로 대답에서 핵심 키워드를 몇개 만들어냅니다. 위의 대화에서는 'loving relationship, Burger King, Burgers, Fries, Yum'이 키워드로 나오고, 이를 Stable Diffusion에 넣어 그림을 생성합니다. 그러면 애니메 캐릭터가 햄버거를 먹는 사진이 대답과 함께 같이 보여집니다.

 

K-009.png


K-014.png

 

 

 

이 서비스의 가장 큰 장점은 대화 내용에 따라 다양한 사진을 볼 수 있다는 것입니다. 기존의 3D 캐릭터 챗봇들은 이렇게 대화의 내용을 화면으로 반영하지 못합니다. 하지만 Stable Diffusion을 쓰면 대화내용에 딱 맞는 콘텐츠를 무한대로 생성할 수 있습니다. 또한 사진과 대화가 일치하기 때문에 더 대화에 몰입할 수 있습니다.

 

K-001.png

 

K-002.png

 

K-004.png

 

 

 

하이퍼클로바와 Stable Diffusion을 조합하면 쓸만한 가상챗봇 앱을 빠르게 구현할 수 있지 않을까요. 물론 비용 때문에 유료로 서비스를 해야겠지만 충분히 그 수요가 있을 것 같습니다. 생성AI는 지금 가장 핫한 기술인데요. 이를 활용하여 누가 먼저 새로운 분야를 개척하는지가 중요합니다. 거기서 차별점이 나올 수 있다고 생각합니다.

 

 

 

< 관련기사 >

https://www.vice.com/.../a-diy-coder-created-a-virtual-ai...

 

< 플레이 영상 >

https://www.tiktok.com/@hack.../video/7178765204959005998...

https://www.tiktok.com/@hack.../video/7179466707382324526...

https://www.tiktok.com/@hack.../video/7187171749954489646...

 

List of Articles
제목 글쓴이 날짜sort 조회 수
마인드로직의 페르소나 챗봇 - 전 SM엔터 이수만 회장 70억 투자 newfile 깊은바다 2024-03-28 9
NVIDIA와 파트너십을 맺은 AI 간호사 서비스 - Hippocratic AI file 깊은바다 2024-03-21 77
Claude 3가 가끔씩 사람처럼 느껴질 때 file 깊은바다 2024-03-19 92
Claude 3와 GPT-4의 일상대화 비교 file 깊은바다 2024-03-15 125
Claude-3와 영화 Her의 사만다 file 깊은바다 2024-03-10 102
Claude-3와 GPT-4의 감성대화 능력 비교 file 깊은바다 2024-03-10 152
일본 MZ세대에게 인기를 끌고 있는 앱 - 이야기 듣는 삼촌 file [2] 깊은바다 2024-03-04 503
GetGPT의 가장 인기 챗봇 - 행발 작성 프로그램 file 깊은바다 2024-02-19 178
클로바X, GPT-3.5, GPT-4의 일상대화 능력 비교 file 깊은바다 2024-02-13 187
버추얼 아이돌 메이브와 대화할 수 있는 AI 챗봇 file 깊은바다 2024-02-08 174
Rabbit의 R1은 뉴로-심볼릭으로 LAM(Large Action Model) 구현 file 깊은바다 2024-01-21 325
혁명적인 AI 네이티브 휴대용 기기 - Rabbit의 R1 file 깊은바다 2024-01-12 428
OpenAI의 GPT Store 출시 및 Team 구독 추가 file 깊은바다 2024-01-11 165
스캐터랩의 새로운 서비스 제타(Zeta) 베타서비스 후기 file 깊은바다 2024-01-09 1493
GPT-4와 Dalle3를 무료로 사용할 수 있는 MS의 Copilot 앱 출시 file 깊은바다 2023-12-31 246