CommencezCommencez gratuitement

Transformers

Les transformers ont changé la donne pour l'IA générative, permettant aux modèles de génération de texte de mieux comprendre la langue.

On vous propose une application interactive qui visualise le mécanisme d'auto‑attention. La phrase est : Transformers excel at grasping the context of text, which allows them to generate more coherent responses., où le mot « them » renvoie à un autre mot de la phrase.

Cliquez sur le mot « them » dans l'application pour explorer à quel point le modèle le relie à chaque autre mot.

Cette activité fait partie du cours

Concepts en IA générative

Voir le cours

Exercice interactif pratique

Passez de la théorie à l’action grâce à l’un de nos exercices interactifs

Commencer l’exercice