글 수 139


 

https://hoya012.github.io/blog/automl-zero-review

 

 

 

제가 인공지능으로 석사를 하던 시기에는 발표되는 논문이 매우 적었습니다. 그때는 arXiv가 활성화되지 않아서, 학회나 저널에 발표된 후에야 검색이 가능했습니다. 지금은 인공지능 관련 논문이 매일 쏟아져 나오는데요. 기존 방법을 조금 바꾼 것을 넘어, 혁신적인 알고리즘도 빠르게 발전하고 있습니다.

 

AutoML-Zero도 그중 하나입니다. 과거에는 딥러닝의 구조를 직접 사람이 설계했습니다. 최근에는 이를 자동으로 수행하는 AutoML이 주목받고 있습니다. 기존에는 NAS(Neural Architecture Search) 같이 학습을 통해 최적의 아키텍처를 생성했습니다. AutoML-Zero는 유전 프로그래밍과 비슷한 진화적 알고리즘을 사용합니다. 사람의 뇌가 만들어진 방식과 좀 더 가깝다고 볼 수 있습니다.

 

또 하나 중요한 차이는 신경망 설계를 바닥부터 시작했다는 점입니다. NAS는 컨볼루션이나 맥스풀링 같은 최소단위를 사람이 미리 구현했습니다. AutoML-Zero는 기초적인 수학 연산자만 가지고 진화를 시켰기 때문에 보다 확장 가능성이 높습니다.

 

앞으로 인공지능도 인공지능이 만드는 시대가 곧 올 듯 합니다. 핵심 연구자들은 계속 필요하겠지만, 보통의 모델러들은 위치가 조금 애매해질지도 모르겠네요. 대신 도메인 전문가들이 보다 쉽게 딥러닝을 적용할 수 있다는 면에는 긍정적인 방향이라 생각합니다.

엮인글 :

NeuroWhAI

2020.03.16 20:15:06
*.207.52.32

와; 정말 놀랍네요.

역전파 알고리즘을 스스로 찾아냈다니...

깊은바다

2020.03.17 01:36:17
*.68.248.95

저도 매번 놀라고 있습니다^^;

List of Articles
제목 글쓴이 날짜 조회 수sort
딥러닝의 기본 깊은바다 2019-07-12 658
딥러닝 이론에서 텐서플로 실습까지 [2] 깊은바다 2017-11-08 650
남세동의 딥러닝 이야기 깊은바다 2018-06-22 646
AI Duet - 피아노 반주를 자동으로 해주는 인공지능 깊은바다 2017-02-28 627
가중치를 하나로 공유하고 모델의 구조만 찾는 WANN 깊은바다 2019-09-10 613
최신 딥러닝 모델들의 학습 비용 깊은바다 2019-12-12 607
딥러닝 역사 깊은바다 2018-07-10 602
사진을 텍스트로 설명 - CaptionBot file 깊은바다 2016-04-07 602
GAN으로 만든 가짜 사진과 진짜 사진을 맞추는 사이트 file 깊은바다 2019-03-04 598
Recurrent Neural Network (RNN) 이해하기 - MNIST 숫자 인식 깊은바다 2018-04-11 593
전신 사진을 생성하는 GAN 깊은바다 2019-05-05 583
AutoML-Zero, 진화적 알고리즘을 사용하여 신경망 구조 설계 [2] 깊은바다 2020-03-13 582
스케치와 색을 지정하여 셀카를 편집하는 SC-FEGAN 깊은바다 2019-02-22 572
당근마켓에서 딥러닝 활용하기 - 불량 게시물 검사 깊은바다 2017-12-23 567
CNN 시각화 사이트 - CNN Explainer 깊은바다 2020-05-10 527