Tokens de mots à partir des Avengers
Maintenant que vous avez tokenisé votre première chaîne, il est temps d’itérer sur les éléments d’une liste et de les tokeniser aussi. Une façon simple de le faire en une seule ligne de code est d’utiliser une compréhension de liste.
Une liste avengers a été créée pour vous. Elle contient quelques répliques des films Avengers. Vous pouvez l’explorer dans l’IPython Shell.
Cet exercice fait partie du cours
<cours>Analyse de sentiments en Python</cours>Instructions de l’exercice
- Importez la fonction et le paquet nécessaires.
- Appliquez la fonction de tokenisation des mots à chaque élément de notre liste.
Exercice interactif pratique
Essayez cet exercice en complétant ce code d’exemple.
# Import the word tokenizing function
from ____ import _____
# Tokenize each item in the avengers
tokens_avengers = [____(item) for item in ____]
print(tokens_avengers)