레플리
글 수 108

언어로만 훈련된 초거대모델의 한계점

조회 수 237 추천 수 0 2022.12.26 12:52:01


https://www.facebook.com/1biit/posts/10161158490516410

 

 

 

"모든 지식이 언어적이라는 견해를 버리면 우리 지식의 상당 부분이 비언어적임을 깨닫게 됩니다."

 

"언어만으로 훈련된 시스템은 지금부터 우주가 죽을 때까지 훈련을 받더라도 결코 인간의 지능에 근접하지 못할 것입니다."

 

 

 

GPT-3 같은 LLM(Large language models)이 hallucination을 겪는 이유가 바로 이것 때문일까요. 언어로만 세상을 배워서는 한계가 있습니다. 사과는 빨갛다라고 말하지만 실제 그 개념을 정확하게 이해하기는 어렵습니다. 사과를 눈으로 보거나, 만져보거나, 냄새를 맡거나, 먹어보는 등의 경험이 없기 때문입니다.

 

 

 

영화 굿 윌 헌팅에 비슷한 비유가 있습니다. 로빈 윌리엄스가 맷 데이먼에게 이렇게 말합니다.

 

"넌 네가 뭘 지껄이는 건지도 모르고 있어...내가 미술에 대해 물으면 넌 온갖 정보를 다 갖다댈걸. 미켈란젤로를 예로 들어볼까. 그에 대해 잘 알거야. 그의 걸작품이나 정치적 야심, 교황과의 관계, 성적 본능까지도 알거야, 그치? 하지만 시스타나 성당의 내음이 어떤지는 모를걸? 한 번도 그 성당의 아름다운 천정화를 본 적이 없을테니까. 난 봤어."

 

 

 

테드 창의 소설 '소프트웨어 객체의 생애 주기'에 디지언트란 가상의 반려동물이 나옵니다. 전직 동물 조련사인 주인공이 가상환경에서 디지언트를 아기 때부터 키웁니다. 그래서 사람과 교감할 수 있는 인공지능을 만들어냅니다.

 

진정한 AGI가 탄생하려면 인공지능에게 몸이 필요하지 않을까요. 물론 현실세계가 좋겠지만 학습 효과나 속도를 높이기 위해서 가상세계에서 배울 수도 있습니다. 결국 사람과 같은 지능을 얻기 위해서는 사람과 같은 방법으로 학습해야 된다고 생각합니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수sort
알파고를 만든 데미스 하사비스 깊은바다 2017-02-28 269
인공지능이 가져올 변화에 대해 쉽게 설명하는 영상 깊은바다 2017-09-08 265
공각기동대속의 인공지능 file 깊은바다 2016-03-25 261
인공지능을 인간이 통제할 수 있을까 [2] 깊은바다 2018-07-23 251
초인공지능의 등장과 인간의 영생 또는 멸망 깊은바다 2017-04-08 239
인공지능과 창의력 [3] 깊은바다 2018-07-04 237
언어로만 훈련된 초거대모델의 한계점 깊은바다 2022-12-26 237
알파고를 만든 데미스 하사비스의 카이스트 강연 깊은바다 2017-09-12 230
인공지능과 기본소득 [2] 깊은바다 2018-09-16 219
기업에 인공지능을 적용하는 방법 깊은바다 2018-12-24 217
MBC 다큐 10년후의 세계 file 깊은바다 2018-09-18 216
인공지능과의 사랑 file 깊은바다 2017-09-24 214
위키에 있는 인공지능 개요 깊은바다 2016-03-29 212
영화 오토마타와 초지능의 탄생 깊은바다 2018-06-04 212
현실과 가상 속 자아, 이제는 메타버스 시대 깊은바다 2021-02-08 211