레플리
글 수 203

딥페이크 알고리즘 설명

조회 수 1787 추천 수 0 2020.07.16 14:14:54


딥페이크를 만드는 방법에 대해 자세히 설명한 글입니다. 먼저 두 사람의 얼굴 사진들을 사용하여 각각 두 개의 오토인코더를 학습합니다. 오토인코더는 사진을 입력하면 압축하고 다시 복원하는 모델입니다. 다만 인코더는 동일하고 디코더만 별도로 분리합니다.

 

Image for post

 

 

 

이제 원본 사진에서 A의 얼굴 부분을 잘라 인코더에 넣습니다. 그러면 압축된 벡터를 구할 수 있습니다. 이걸 A가 아니라 B의 디코더로 복원합니다. 그러면 A의 모습을 그대로 따라한 B의 사진이 만들어집니다. 이 B의 얼굴 조각을 A의 원본 사진에 붙입니다. 마지막으로 얼굴톤을 맞추는 등 이미지 처리를 하면 딥페이크가 완성됩니다.

 

Image for post

 

 

 

그 밖에 다양한 기법들이 나와있으니, 아래 링크 참고 바랍니다.

 

https://medium.com/@jonathan_hui/how-deep-learning-fakes-videos-deepfakes-and-how-to-detect-it-c0b50fbf7cb9

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수sort
Transformer와 동급의 성능에 속도는 훨씬 빨라진 MLP-Mixer file 깊은바다 2021-06-11 1448
R-CNN 에서 부터 Mask R-CNN 까지 깊은바다 2019-09-03 1409
목소리와 입모양을 변경할 수 있는 GAN 모델 깊은바다 2019-06-13 1389
딥페이크로 일론 머스크인 척 친구들을 속이는 영상 깊은바다 2020-04-19 1389
텐서플로우에서 소프트맥스로 숫자 인식 구현 file 깊은바다 2017-03-09 1375
텐서플로우로 선형 회귀 구현 file 깊은바다 2017-03-09 1361
오픈소스로 공개된 Text-to-Image 모델 - Stable Diffusion 깊은바다 2022-09-07 1353
사진을 디즈니 만화로 바뀌주는 딥러닝 모델 - Toonify 깊은바다 2020-09-21 1345
딥러닝 범용 모델 - Foundation Models 깊은바다 2021-09-06 1319
아이폰에서 실행하는 Stable Diffusion 앱 - Draw Things 깊은바다 2022-11-11 1315
RNN(Recurrent Neural Network) 튜토리얼 깊은바다 2017-07-22 1303
하나의 얼굴 이미지로 다양하게 변형된 얼굴을 만드는 StarGAN [1] NeuroWhAI 2017-12-30 1301
딥러닝 GAN으로 생성한 고해상도 사진 [2] 깊은바다 2017-06-08 1290
전문가 수준의 사진을 생성하는 NVIDIA의 PoE-GAN 깊은바다 2022-02-16 1282
최신 딥러닝 모델들의 학습 비용 깊은바다 2019-12-12 1268