레플리
글 수 282

딥러닝 자연어처리 - RNN에서 BERT까지

조회 수 1756 추천 수 1 2019.01.07 23:25:42


BERT 구조 ⢠í¸ëì¤í¬ë¨¸ì ì¸ì½ëë§ ì¬ì© ⢠BERT Base â 12ê°ì í¸ëì¤í¬ë¨¸ ë¸ë¡ ⢠BERT Large â 24ê°ì í¸ëì¤í¬ë¨¸ ë¸ë¡

https://www.slideshare.net/deepseaswjh/rnn-bert

 

 

 

이번에 자연어처리 강연 교재를 만들고 있습니다. 그중 RNN부터 BERT까지 정리한 자료를 공유합니다. 초보자를 대상으로 최대한 쉽게 설명하려고 노력했습니다. 대신 자세한 알고리즘은 다루지 않았습니다. 전체적인 개념을 이해하는데 도움이 되었으면 좋겠습니다.

 

 

 

< 챗봇 개발자 모임 >

- 페이스북 그룹에 가입하시면 챗봇에 대한 최신 정보를 쉽게 받으실 수 있습니다.

https://www.facebook.com/groups/ChatbotDevKR/

엮인글 :

NeuroWhAI

2019.01.08 18:35:53
*.64.194.131

감사합니다!

어텐션을 겨우겨우 이해했다고 생각했는데 트랜스포머에 BERT까지 허허 ㅠㅠ

깊은바다

2019.01.09 03:48:28
*.207.106.177

기술 발전이 너무 빠르죠 ㅎㅎ

저도 따라가기 벅찹니다 ㅠㅠ

List of Articles
제목 글쓴이 날짜 조회 수sort
Jay Alammar의 트랜스포머 한글 번역글 깊은바다 2019-05-09 1063
한국어 LLM 민주화의 시작 KoAlpaca file 깊은바다 2023-07-17 1053
Seq2Seq와 어텐션 기법을 애니메이션으로 쉽게 설명한 글 깊은바다 2018-10-12 1051
GPT-3의 다섯 가지 한계 깊은바다 2020-08-23 1050
단어를 벡터로 변환하는 Word2Vec 깊은바다 2017-05-04 1039
추천시스템이 word2vec을 만났을때 깊은바다 2018-08-22 1032
Meme 자동 생성기 깊은바다 2020-05-11 1023
딥러닝 기반 자연어처리 기법의 최근 연구 동향 [2] 깊은바다 2017-12-17 1020
딥러닝과 자연어처리의 집중 메커니즘 깊은바다 2018-09-08 1019
페르소나에 따라 대화를 하는 딥러닝 챗봇 by Hugging Face 깊은바다 2020-03-06 1007
프로그램을 작성하는 딥마인드의 알파코드 file 깊은바다 2022-02-04 1005
7B의 Alpaca가 175B의 GPT-3.5와 동급의 성능을 보임 file 깊은바다 2023-03-14 976
가짜뉴스를 생성 또는 판별하는 딥러닝 모델 - Grover 깊은바다 2019-06-01 969
OpenAI의 대화전용 딥러닝 모델 - ChatGPT file 깊은바다 2022-12-02 965
End-To-End Memory Networks - 자연어 질문에 대답하는 모델 [2] 깊은바다 2017-08-21 962