1. Learn
    2. /
  2. Курси
    3. /
  3. Аналіз тональності в Python
Connected

Вправа

Токенізуйте рядок із GoT

Перший стандартний крок під час роботи з текстом — це його токенізація, тобто поділ довшого рядка на окремі рядки, зазвичай окремі слова (токени).

Для вас створено рядок GoT із цитатою з роману Джорджа Р. Р. Мартіна Гра престолів. Ваше завдання — розбити його на окремі токени.

Інструкції

100 XP
  • Імпортуйте функцію токенізації слів з nltk.
  • Перетворіть рядок GoT на словесні токени.