레플리
글 수 497

GPT-3의 10배 크기인 중국의 Wu Dao 초거대 모델

조회 수 201 추천 수 0 2021.06.06 15:12:16


China’s ‘Wu Dao’ AI is 10X bigger than GPT-3, and it can sing

 

https://thenextweb.com/news/china-wu-dao-ai-10x-bigger-than-gpt-3

 

 

 

중국 정부의 지원을 받는 BAAI(Beijing Academy of Artificial Intelligence)에서 Wu Dao라는 새로운 초거대 모델을 공개했습니다. GPT-3의 10배인 1.75조개의 파라미터를 가지고 있습니다. 또한 얼마 전 발표한 구글의 MUM(Multitask Unified Model)처럼 텍스트, 이미지, 오디오 등 다양한 입력을 받을 수 있는 멀티모달 모델입니다.

 

이제 흐름이 또 한번 바뀌고 있는 것 같습니다. GPT-3가 텍스트만 처리할 수 있다면, 최근 초거대 모델은 모든 형태의 데이터를 동시에 받도록 진화하고 있습니다. 당연히 활용할 영역이 더 많아질 텐데요. 현재 Transformer는 자연어처리뿐만 아니라 이미지분류, 이미지생성, 오디오 등 거의 모든 딥러닝 분야에 사용이 가능합니다. 이를 하나로 통합한 구조도 이미 등장했습니다. 여기에 초거대 모델을 적용한다면 어떻게 될까요. 아무튼 딥러닝이 점점 범용적으로 발전하고 있는 중입니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수
전화 상담원 다 사라지나… AI 콜센터 눈독 들이는 네이버·카카오 깊은바다 2021-10-14 1248
미국의 탐사프로그램인 60 Minutes에서 다룬 딥페이크 기술 깊은바다 2021-10-12 768
손정의가 꿈꾸는AI 기반 일본의 부흥 깊은바다 2021-10-07 1243
삼성전자, 뇌를 닮은 차세대 뉴로모픽 반도체 비전 제시 깊은바다 2021-10-05 727
인공지능 기술로 고인 목소리 재현 깊은바다 2021-09-27 929
딥마인드, 부적절한 문장을 판단하기가 어렵다는 연구 발표 깊은바다 2021-09-23 1024
메타버스는 기존 온라인 게임이랑 무엇이 다른가 깊은바다 2021-09-14 1104
인공지능이 절대 할 수 없는 네 가지 깊은바다 2021-09-10 1178
이마트24, 서울 코엑스에 '완전스마트매장' 개장 깊은바다 2021-09-08 993
OpenAI의 샘 올트먼, GPT-4에 대해서 살짝 공개 깊은바다 2021-09-08 1742
AI 필요한 분야 1순위는 '의료'…만족도 낮은 AI는 '챗봇' 깊은바다 2021-09-06 1042
발 킬머의 목소리를 딥러닝으로 구현한 탑건 후속편이 나올까 깊은바다 2021-09-02 6382
교촌치킨 로봇이 튀긴다...첫 로봇매장 오픈 깊은바다 2021-08-27 980
GPT-3로 만든 피싱 이메일이 사람이 작성한 것보다 더 효과적 깊은바다 2021-08-24 1073
테슬라 AI 데이, 안드레이 카파시의 발표 영상 깊은바다 2021-08-24 996