Jetons de mots à partir des Avengers
Maintenant que vous avez tokenisé votre première chaîne de caractères, il est temps d'itérer sur les éléments d'une liste et de les tokeniser aussi. Une façon simple de le faire en une seule ligne de code est d'utiliser une compréhension de liste.
Une liste avengers a été créée pour vous. Elle contient quelques répliques des films Avengers. Vous pouvez l'explorer dans le Shell IPython.
Cette activité fait partie du cours
Analyse de sentiment en Python
Instructions de l’exercice
- Importez la fonction et le paquet requis.
- Appliquez la fonction de tokenisation des mots à chaque élément de notre liste.
Exercice interactif pratique
Essayez cet exercice en complétant ce code d’exemple.
# Import the word tokenizing function
from ____ import _____
# Tokenize each item in the avengers
tokens_avengers = [____(item) for item in ____]
print(tokens_avengers)