CommencezCommencez gratuitement

Tokeniser une chaîne tirée de GoT

Une première étape classique en traitement de texte consiste à le tokeniser, c'est‑à‑dire à découper une longue chaîne en chaînes individuelles, généralement des mots (jetons).

Une chaîne GoT a été créée pour vous et contient une citation de Game of Thrones de George R. R. Martin. Votre tâche est de la découper en jetons individuels.

Cette activité fait partie du cours

Analyse de sentiment en Python

Voir le cours

Instructions de l’exercice

  • Importez la fonction de découpage en mots depuis nltk.
  • Transformez la chaîne GoT en jetons de mots.

Exercice interactif pratique

Essayez cet exercice en complétant ce code d’exemple.

# Import the required function
from nltk import ____

# Transform the GoT string to word tokens
print(____(____))
Modifier et exécuter le code