1. Apprendre
  2. /
  3. Cours
  4. /
  5. Réseaux de neurones récurrents (RNN) pour la modélisation du langage avec Keras

Connected

Exercice

Prétraitement avec Keras

Le deuxième module le plus important de Keras est keras.preprocessing. Vous verrez comment utiliser les modules et fonctions essentiels pour préparer des données brutes à la bonne forme d'entrée. Keras offre des fonctionnalités qui remplacent l'approche par dictionnaire que vous avez vue plus tôt.

Vous utiliserez le module keras.preprocessing.text.Tokenizer pour créer un dictionnaire de mots avec la méthode .fit_on_texts() et transformer les textes en identifiants numériques représentant l'index de chaque mot dans le dictionnaire à l'aide de la méthode .texts_to_sequences().

Ensuite, utilisez la fonction .pad_sequences() de keras.preprocessing.sequence pour que toutes les séquences aient la même taille (nécessaire pour le modèle) en ajoutant des zéros aux textes courts et en coupant les plus longs.

Instructions

100 XP
  • Importez Tokenizer et pad_sequences des modules pertinents.
  • Ajustez l'objet tokenizer sur les données d'exemple stockées dans texts.
  • Transformez les textes en séquences d'index numériques avec la méthode .texts_to_sequences().
  • Uniformisez la taille des textes en les remplissant (padding).