Transformatoren

Transformer waren ein echter Wendepunkt für generative KI und ermöglichen es textgenerierenden KI-Modellen, Sprache viel tiefer zu verstehen.

Du bekommst eine interaktive Anwendung, die den Self-Attention-Mechanismus visualisiert. Der Satz lautet: Transformers excel at grasping the context of text, which allows them to generate more coherent responses., wobei sich das Wort "them" auf ein anderes Wort im Satz bezieht.

Klicke in der Anwendung auf das Wort "them", um zu sehen, wie stark das Modell es mit jedem anderen Wort verknüpft.