글 수 120


 

https://hoya012.github.io/blog/automl-zero-review

 

 

 

제가 인공지능으로 석사를 하던 시기에는 발표되는 논문이 매우 적었습니다. 그때는 arXiv가 활성화되지 않아서, 학회나 저널에 발표된 후에야 검색이 가능했습니다. 지금은 인공지능 관련 논문이 매일 쏟아져 나오는데요. 기존 방법을 조금 바꾼 것을 넘어, 혁신적인 알고리즘도 빠르게 발전하고 있습니다.

 

AutoML-Zero도 그중 하나입니다. 과거에는 딥러닝의 구조를 직접 사람이 설계했습니다. 최근에는 이를 자동으로 수행하는 AutoML이 주목받고 있습니다. 기존에는 NAS(Neural Architecture Search) 같이 학습을 통해 최적의 아키텍처를 생성했습니다. AutoML-Zero는 유전 프로그래밍과 비슷한 진화적 알고리즘을 사용합니다. 사람의 뇌가 만들어진 방식과 좀 더 가깝다고 볼 수 있습니다.

 

또 하나 중요한 차이는 신경망 설계를 바닥부터 시작했다는 점입니다. NAS는 컨볼루션이나 맥스풀링 같은 최소단위를 사람이 미리 구현했습니다. AutoML-Zero는 기초적인 수학 연산자만 가지고 진화를 시켰기 때문에 보다 확장 가능성이 높습니다.

 

앞으로 인공지능도 인공지능이 만드는 시대가 곧 올 듯 합니다. 핵심 연구자들은 계속 필요하겠지만, 보통의 모델러들은 위치가 조금 애매해질지도 모르겠네요. 대신 도메인 전문가들이 보다 쉽게 딥러닝을 적용할 수 있다는 면에는 긍정적인 방향이라 생각합니다.

엮인글 :

NeuroWhAI

2020.03.16 20:15:06
*.207.52.32

와; 정말 놀랍네요.

역전파 알고리즘을 스스로 찾아냈다니...

깊은바다

2020.03.17 01:36:17
*.68.248.95

저도 매번 놀라고 있습니다^^;

List of Articles
제목 글쓴이 날짜sort 조회 수
GAN으로 만든 모델 사진을 판매하는 일본 회사 new 깊은바다 2020-07-08 15
생성 모델이 일반 인공지능(AGI)으로 가는 열쇠 file 깊은바다 2020-06-29 332
퓨샷 러닝(few-shot learning)과 메타 러닝(meta-learning) 깊은바다 2020-06-27 109
자동회귀(autoregressive)로 이미지를 생성하는 iGPT file 깊은바다 2020-06-18 149
GPT3를 기반으로한 OpenAI API 유료화 깊은바다 2020-06-12 231
스케치를 얼굴사진으로 변형하는 딥러닝 생성모델 - DeepFaceDrawing 깊은바다 2020-06-07 110
AI는 '스스로 학습'할 수 있을까? - 자기지도학습 깊은바다 2020-06-02 164
팩맨 게임을 딥러닝으로 시뮬레이션한 GameGAN 깊은바다 2020-05-23 152
CNN 시각화 사이트 - CNN Explainer 깊은바다 2020-05-10 224
얀 르쿤, 자기지도학습이 강화학습보다 중요 깊은바다 2020-05-03 161
미디가 아니라 오디오로 음악을 만들어내는 OpenAI의 생성 모델 - Jukebox file 깊은바다 2020-05-02 75
딥러닝 웹서비스 개발 도전기 - 연예인 얼굴 판별기 깊은바다 2020-05-01 146
사회적 거리를 지키는지 확인하는 지능형 CCTV 깊은바다 2020-04-23 161
딥페이크로 일론 머스크인 척 친구들을 속이는 영상 깊은바다 2020-04-19 194
딥마인드의 Agent57, 아타리 게임 벤치마크 정복 깊은바다 2020-04-03 171