Tokens de mots à partir des Avengers
Maintenant que vous avez tokenisé votre première chaîne, il est temps d’itérer sur les éléments d’une liste et de les tokeniser aussi. Une façon simple de le faire en une seule ligne de code est d’utiliser une compréhension de liste.
Une liste avengers a été créée pour vous. Elle contient quelques répliques des films Avengers. Vous pouvez l’explorer dans l’IPython Shell.
Cet exercice fait partie du cours
Analyse de sentiments en Python
Instructions
- Importez la fonction et le paquet nécessaires.
- Appliquez la fonction de tokenisation des mots à chaque élément de notre liste.
Exercice interactif pratique
Essayez cet exercice en complétant cet exemple de code.
# Import the word tokenizing function
from ____ import _____
# Tokenize each item in the avengers
tokens_avengers = [____(item) for item in ____]
print(tokens_avengers)