백석예술대학교 도서관

네이버 백과사전
No	제목 / 내용
1	토큰화 토큰화는 텍스트 데이터 전처리의 한 과정으로, 주어진 텍스트 데이터를 토큰(token) 단위로 나누는 작업이다. \| 외국어 표기 \| Tokenizing, Tokenization(영어) \| 어절이나 문장과 같이 자연언어 화자에게...

Daum 지식
No	제목 / 내용

본문