트랜스포머

트랜스포머(Transformers)는 생성형 AI 분야에 혁신을 가져온 기술로, 텍스트 생성 AI 모델이 언어를 훨씬 깊이 이해할 수 있도록 해줍니다.

아래에는 셀프 어텐션(self-attention) 메커니즘을 시각화하는 인터랙티브 애플리케이션이 제공되어 있습니다. 사용할 문장은 다음과 같습니다: Transformers excel at grasping the context of text, which allows them to generate more coherent responses. 이 문장에서 "them"은 문장 내 다른 단어를 가리킵니다.

애플리케이션에서 "them"을 클릭하여 모델이 해당 단어를 다른 각 단어와 얼마나 강하게 연결하는지 살펴보세요.