Токены слов из «Мстителей»
Теперь, когда вы токенизировали первую строку, пора пройтись по элементам списка и токенизировать их тоже. Удобный способ сделать это в одну строку кода — использовать генератор списка.
Список avengers уже создан для вас. Он содержит несколько цитат из фильмов Мстители. Вы можете изучить его в оболочке IPython.
Это упражнение является частью курса
Анализ тональности текста на Python
Инструкции к упражнению
- Импортируйте необходимую функцию и пакет.
- Примените функцию токенизации слов к каждому элементу списка.
Интерактивное практическое упражнение
Попробуйте выполнить это упражнение, дополнив этот пример кода.
# Import the word tokenizing function
from ____ import _____
# Tokenize each item in the avengers
tokens_avengers = [____(item) for item in ____]
print(tokens_avengers)