레플리
글 수 283

딥러닝으로 동네생활 게시글 필터링하기

조회 수 398 추천 수 0 2020.10.06 17:55:47


Image for post

 

https://medium.com/daangn/%EB%94%A5%EB%9F%AC%EB%8B%9D%EC%9C%BC%EB%A1%9C-%EB%8F%99%EB%84%A4%EC%83%9D%ED%99%9C-%EA%B2%8C%EC%8B%9C%EA%B8%80-%ED%95%84%ED%84%B0%EB%A7%81%ED%95%98%EA%B8%B0-263cfe4bc58d

 

 

 

중고거래로 유명한 당근마켓에 동네생활이라는 게시판이 있습니다. 거래와 별개로 동네에서 벌어지는 이야기를 올리는 곳입니다. 여기에 상관없는 글들을 필터링하는데 BERT를 사용했다고 합니다. 사전훈련부터 파인튜닝, 배포까지의 과정이 자세히 기록되어 있습니다.

 

지금도 많은 회사들이 모니터링을 위해 딥러닝을 사용하고 있습니다. 이미지 인식으로 사진을, 자연어처리로 텍스트를 분류합니다. 덕분에 기존 사람이 했던 일들을 상당수 자동화할 수 있습니다.

 

엮인글 :
List of Articles
제목 글쓴이 날짜 조회 수sort
OpenAI Transformer GPT2로 만든 언어 모델 깊은바다 2019-02-17 2980
카카오 형태소 분석기(khaiii) 설치와 은전한닢(mecab) 형태소 분석기 비교 깊은바다 2018-12-02 2828
구글 딥러닝 자연어 처리 오픈소스 SyntaxNet file 깊은바다 2017-12-28 2784
그림으로 아주 쉽게 설명한, The Illustrated GPT-2 깊은바다 2020-08-15 2780
추론이 가능한 딥러닝인 Relational Networks [2] 깊은바다 2017-06-11 2740
Python과 Tensorflow를 활용한 AI Chatbot 개발 및 실무 적용 깊은바다 2017-08-25 2582
GPT-3를 강화학습으로 업그레이드한 InstructGPT file 깊은바다 2022-01-30 2566
오픈소스 한국어 딥러닝 챗봇 - Kochat 깊은바다 2020-07-03 2501
딥러닝을 사용하여 의도 및 엔티티를 파악하는 챗봇 소스코드 file 깊은바다 2019-06-25 2329
개체명인식 with Naver 깊은바다 2018-11-20 2320
BERT로 토익 문제를 푸는 프로젝트 file 깊은바다 2019-04-30 2282
GPT2에서 문장 생성 시 단어를 확률에 따라 선택하는 방법 깊은바다 2020-07-16 2205
소설을 생성하는 NarrativeKoGPT2 file 깊은바다 2020-06-19 2197
GPT2로 만든 텍스트 어드벤처 게임 깊은바다 2019-12-09 2010
딥러닝으로 욕설 탐지하기 깊은바다 2018-08-06 1881