레플리
글 수 203


RetrieveGAN

 

https://venturebeat.com/2020/07/22/retrievegan-ai-tool-combines-scene-fragments-to-create-new-images/

 

 

 

RetrieveGAN이라는 재미있는 모델이 공개됐습니다. 말로 장면을 설명하면 거기에 맞는 이미지를 만들어냅니다. StackGAN(http://aidev.co.kr/5894)과 비슷하지만 큰 차이가 있습니다. 문장에서 바로 사진을 생성하지 않고, 먼저 데이터셋에서 각 오브젝트의 사진 조각들을 찾습니다. 그다음 이 사진 조각들을 사용해서 GAN으로 전체 이미지를 다시 그립니다. 이렇게 하면 좀 더 정확한 사진을 만들 수 있습니다.

 

예를 들어, '하늘이 보이는 바다위에 사람이 있다'라는 문장이 주어졌습니다. 우선 이를 그래프로 변환하고, 다시 수학적인 형식으로 표현합니다. 그리고 '하늘', '바다', '사람'의 사진 조각을 데이터에서 검색합니다. 마지막으로 GAN을 통해 하나의 이미지를 생성합니다.

 

작년에 NVIDIA에서 스케치를 사진으로 만들어주는 GauGAN(http://aidev.co.kr/7184)을 발표하기도 했습니다. 앞으로는 더 나아가 컴퓨터와 대화하면서 그림을 그리는 시대가 될 것 같습니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜sort 조회 수
딥페이크 알고리즘 설명 깊은바다 2020-07-16 1771
대학교 게시판을 크롤링하여 만든 GPT2 모델 file 깊은바다 2020-07-18 913
자신의 사진과 선택한 옷들을 GAN으로 합성해서 보여주는 딥러닝 깊은바다 2020-07-21 1880
말로 설명하면 사진을 만들어주는 딥러닝 모델 - RetrieveGAN 깊은바다 2020-07-26 632
배치 사이즈에 따라 GPU 메모리가 증가하는 이유 깊은바다 2020-07-28 5245
StyleGAN을 이말년 웹툰으로 파인튜닝한 모델 깊은바다 2020-08-07 2707
셀카를 일반 사진으로 변환해주는 GAN 모델 - Unselfie file 깊은바다 2020-08-08 888
사진 한장으로 딥페이크 영상을 만드는 앱 - Reface 깊은바다 2020-08-18 26883
사진을 복원하는 딥러닝 모델 - DFDNet 깊은바다 2020-08-24 1218
3초 분량의 100만개 동영상 데이터셋 - Moments in Time 깊은바다 2020-09-05 564
AI 없이 힘낼 수 없는 엔비디아 지포스 RTX - 딥러닝 DLSS 기술 깊은바다 2020-09-07 517
사진을 디즈니 만화로 바뀌주는 딥러닝 모델 - Toonify 깊은바다 2020-09-21 1334
앤드류 응의 YOLO 강의 영상 깊은바다 2020-09-23 833
파이토치 버전 YOLO Colab 테스트 코드 file 깊은바다 2020-09-25 594
이미지 생성모델에서 특징 벡터를 추출하여 사진을 조작하는 방법 file 깊은바다 2020-10-09 1547