1. 학습
    2. /
  2. 강의
    3. /
  3. Python으로 배우는 Natural Language Processing (NLP)
Connected

연습 문제

문장 및 단어 토크나이즈

토크나이즈는 NLP의 첫 단계로 매우 중요해요. 텍스트를 토큰이라 부르는 더 작은 단위로 분할하는 작업으로, 언어 데이터를 다루는 데 핵심입니다. 이번 과제에서는 뉴스 기사 일부를 문장과 단어 단위로 각각 토크나이즈해 보세요.

지침 1/2

undefined XP
    1
    2
  • nltk 라이브러리를 임포트하세요.
  • punkt_tab 패키지를 다운로드하세요.
  • text를 sentences로 토크나이즈하세요.