레플리

문서 (7)

  • CLIP을 사용하여 말로 그림을 그려주는 스마트폰 앱 - WOMBO Dream
    요즘 제가 가장 관심있게 보는 딥러닝 기술은 OpenAI가 공개한 CLIP입니다. 자연어와 이미지를 멀티모달로 구현한 모델입니다. 지금까지 이미지 분류, 자연어로 이미지 생성, 유튜브 영상을 텍스트로 검색 등 다양한...
    깊은바다 | 2021-11-25 10:53 | 조회 수 1781
  • 텍스트를 이미지로 생성해주는 사이트 - Text2Art (VQGAN-CLIP)
              OpenAI의 CLIP은 이미지와 텍스트를 동시에 고려하는 멀티모달 모델입니다. 이를 활용한 다양한 애플리케이션이 등장하고 있는데요. 이번에는 Text2Art란 사이트가 생겼습니다. 말로 설명하면 그림을 그려...
    깊은바다 | 2021-11-10 16:06 | 조회 수 6902
  • OpenAI의 CLIP을 한글로 구현한 KoCLIP
    OpenAI에서 발표한 CLIP을 한글로 구현한 KoCLIP을 소개해드립니다. 보통 이미지 분류는 사진을 각 클래스로 예측합니다. 예를 들어, 10개의 클래스라면 0은 강아지, 1은 고양이, 이런 식으로 구분합니다. 반면에 CLI...
    깊은바다 | 2021-11-02 16:38 | 조회 수 2833
  • OpenAI의 CLIP을 사용해서 자연어로 유튜브 영상 검색
    https://github.com/haltakov/natural-language-youtube-search 올해 1월에 OpenAI가 CLIP이란 모델을 공개했습니다. 자연어를 벡터로 표현하고, 이미지도 벡터로 표현합니다. 그다음 같은 의미를 가진 자연어와 이...
    깊은바다 | 2021-07-05 15:51 | 조회 수 1098
  • 말로 설명하여 이미지를 변형하는 GAN - StyleCLIP
    딥러닝의 여러 분야 중에서도 가장 눈에 띄면서 화려한 것은 역시 GAN입니다. 보통 GAN은 임의의 잠재벡터(latent vector) z를 입력으로 넣으면 이미지를 출력합니다. 이미지를 표현하는 전체 잠재공간(latent space)...
    깊은바다 | 2021-04-04 18:23 | 조회 수 1818
  • 뉴런 하나로 특정 개념을 표현한다, CLIP 모델에서 개념 뉴런을 발견
    뇌과학에서 오랫동안 논란이 되어왔던 개념으로 할머니 세포가 있습니다. 할머니의 기억이 담긴 뉴런을 찾는다는 소설에서 유래가 되었는데, 우리의 기억이 특정 세포 하나에 존재할지도 모른다는 주장입니다. 그러다...
    깊은바다 | 2021-03-12 17:18 | 조회 수 574
  • 이젠 모델 구축도 학습도 필요없다, OpenAI의 이미지인식 모델 CLIP
    올해 1월에 OpenAI에서 주목할 만한 딥러닝 모델을 2가지 공개했습니다. 하나는 자연어로 이미지를 생성하는 DALL-E고, 다른 하나는 바로 CLIP(Contrastive Language–Image Pre-training)입니다. DALL-E는 많은 분들...
    깊은바다 | 2021-03-07 16:17 | 조회 수 4358