레플리
글 수 497

구글의 Switch Transformer, 인간 뇌의 1/100 크기에 도달

조회 수 590 추천 수 0 2021.01.14 15:16:45
깊은바다 *.52.246.214


NEW YORK, NEW YORK - OCTOBER 20: Google's offices stand in downtown Manhattan on October 20, 2020 in New York City. Accusing the company of using anticompetitive tactics to illegally monopolize the online search and search advertising markets, the Justice Department and 11 states Tuesday filed an antitrust case against Google.

 

https://venturebeat.com/2021/01/12/google-trained-a-trillion-parameter-ai-language-model/amp

 

 

 

구글이 Switch Transformer라는 새로운 모델을 발표했습니다. GPT-3의 파라미터는 1750억개입니다. 이 모델은 그 10배인 1.6조개의 파라미터로 구성되어 있습니다.

 

사람의 뉴런이 1000억개입니다. 뉴런과 뉴런을 연결하는 것은 시냅스로 모델의 파라미터와 같은 역할을 합니다. 실제 학습을 통해 배운 지능은 바로 이 시냅스에 존재합니다. 시냅스는 대략 100조개로 알려져 있습니다.

 

이제 딥러닝이 우리 뇌의 1/100정도까지 규모가 커졌습니다. 과연 사람과 동일한 크기가 된다면 인간과 비슷한 지능을 가지게 될까요.

 

이 게시물을
엮인글 :
목록
List of Articles
제목 글쓴이 날짜 조회 수sort
다음달 미국에선, 택시기사 없는 택시가 달린다 깊은바다 2018-11-19 146
아마존 알렉사의 직원들이 하는 업무 깊은바다 2019-01-24 146
개인정보 훔쳐 스팸전화… 인간 뺨치는 中 AI 로봇 깊은바다 2019-03-29 146
AI 스피커 일취월장...활용·만족도 향상 과제로 깊은바다 2019-03-31 146
완전 자율주행 자동차를 출시하는 테슬라 깊은바다 2019-04-23 146
이용자와 대화하는 똑똑한 AI, 가전으로 승부수 깊은바다 2019-04-11 146
페이스북, Learning from Videos 프로젝트 발표 깊은바다 2021-03-15 146
로블록스, 게임제작에 생성AI 도입 예정 깊은바다 2023-02-19 146
챗봇 더한 KT 고객센터 앱, 이용자 두배 증가 깊은바다 2017-07-15 147
로봇 개, 이번에는 양치는 목동으로 변신 깊은바다 2020-05-26 147
도로 쓰레기 투기 ‘인공지능 CCTV’로 잡는다 깊은바다 2021-04-11 147
AI 앵커가 '난 늙지 않아' 자신의 미래를 말하다 깊은바다 2021-04-18 147
인공지능 시대, '향후 30년 간 절반 이상 실직' 전망 깊은바다 2017-03-22 148
음성인식 인공지능이 패러다임이 되는 순간 깊은바다 2018-07-20 148
LG전자, 챗봇 개발, 첫 단추 잘 끼우려면 깊은바다 2019-10-16 148
목록
쓰기