레플리
글 수 203


RetrieveGAN

 

https://venturebeat.com/2020/07/22/retrievegan-ai-tool-combines-scene-fragments-to-create-new-images/

 

 

 

RetrieveGAN이라는 재미있는 모델이 공개됐습니다. 말로 장면을 설명하면 거기에 맞는 이미지를 만들어냅니다. StackGAN(http://aidev.co.kr/5894)과 비슷하지만 큰 차이가 있습니다. 문장에서 바로 사진을 생성하지 않고, 먼저 데이터셋에서 각 오브젝트의 사진 조각들을 찾습니다. 그다음 이 사진 조각들을 사용해서 GAN으로 전체 이미지를 다시 그립니다. 이렇게 하면 좀 더 정확한 사진을 만들 수 있습니다.

 

예를 들어, '하늘이 보이는 바다위에 사람이 있다'라는 문장이 주어졌습니다. 우선 이를 그래프로 변환하고, 다시 수학적인 형식으로 표현합니다. 그리고 '하늘', '바다', '사람'의 사진 조각을 데이터에서 검색합니다. 마지막으로 GAN을 통해 하나의 이미지를 생성합니다.

 

작년에 NVIDIA에서 스케치를 사진으로 만들어주는 GauGAN(http://aidev.co.kr/7184)을 발표하기도 했습니다. 앞으로는 더 나아가 컴퓨터와 대화하면서 그림을 그리는 시대가 될 것 같습니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수sort
CNN 초보자가 만드는 초보자 가이드 깊은바다 2017-04-09 1040
메타AI의 멀티모달 자기지도학습 모델인 Data2vec 깊은바다 2022-01-26 1028
GAN으로 사진에서 특정 부분을 지워주는 서비스 - Cleanup.pictures file 깊은바다 2022-01-17 1018
딥러닝(Deep Learning)에 대한 소개 깊은바다 2016-03-21 1000
어떻게 컴퓨터가 사진을 이해하게 되었는가 깊은바다 2017-03-31 995
문장을 사진으로 변환하는 GPT-3 모델, DALL-E 깊은바다 2021-01-09 978
스케치를 사진으로 변환하는 딥러닝 - NVIDIA의 GauGAN 깊은바다 2019-03-20 968
원티드는 어떻게 AI로 채용 결과를 예측하고 매칭할까 깊은바다 2021-11-09 959
자신의 이름을 음성으로 만들어 주는 사이트 깊은바다 2019-02-04 955
95생 천재 소녀가 만든 Pika가 빅테크들을 이길 수 있었던 이유 file [2] 깊은바다 2023-12-24 949
딥러닝 라이브러리 텐서플로우의 기본 사용법 깊은바다 2017-03-03 948
책 읽어주는 딥러닝 깊은바다 2017-11-23 943
딥러닝의 기본 깊은바다 2019-07-12 935
대학교 게시판을 크롤링하여 만든 GPT2 모델 file 깊은바다 2020-07-18 913
소프트웨어 개발 경험이 먼저다 - 딥러닝 역시 S/W 기술의 하나일 뿐 깊은바다 2021-07-14 913