[딥러닝을이용한 자연어 처리 입문] 1402 센텐트피스(SentencePiece)

 1. Sentencepiece


논문 : https://arxiv.org/pdf/1808.06226.pdf
- 센텐스피스 깃허브 : https://github.com/google/sentencepiece



2. IMDB 리뷰 토큰화하기



3. 네이버 영화 리뷰 토큰화하기




nlp_1402_sentencepiece_센텐스피스.ipynb

0.03MB



- 출처 : [딥러닝을이용한 자연어 처리 입문] 1402 센텐트피스(SentencePiece)

댓글

이 블로그의 인기 게시물

[이수안컴퓨터연구소] 파이썬 레이싱 자동차 게임 만들기 Creating a Python Racing Car Game with pygame (한글자막)

[빵형의 개발도상국] 얼굴 인식 알고리즘 성능 비교 - Python, Deep Learning