*BPE 방식 vs 형태소 분석기 방식
*Word Piece Model 이 유용할 수 있는 상황과 그렇지 않은 상황
*MeCab에 단어 추가하기
반응형
'스타트업 > AI' 카테고리의 다른 글
| [AI] 한국어 불용어 (0) | 2020.09.01 |
|---|---|
| [AI] Tokenizer 만들기 (0) | 2020.08.21 |
| [AI] 자연어 처리 (0) | 2020.08.19 |
| [AI] BERT을 이용한 NER 적용 방법 정리 (0) | 2020.08.18 |
| [AI] firebase (0) | 2020.08.14 |