トランスフォーマー

トランスフォーマー（Transformer）は生成AIにとって革新的な技術であり、テキスト生成AIモデルが言語をより深く理解することを可能にしました。

ここでは、自己アテンション（self-attention）メカニズムを視覚的に確認できるインタラクティブなアプリケーションを用意しています。対象の文は、Transformers excel at grasping the context of text, which allows them to generate more coherent responses. です。この文の中で、「them」は別の単語を指しています。

アプリケーション内の「them」という単語をクリックして、モデルが他の各単語とどれだけ強く結びつけているかを確認しましょう。