Trasformatori

I transformer hanno rivoluzionato la generative AI, permettendo ai modelli che generano testo di comprendere il linguaggio in modo molto più profondo.

Hai a disposizione un'applicazione interattiva che visualizza il meccanismo di self-attention. La frase è: Transformers excel at grasping the context of text, which allows them to generate more coherent responses., dove la parola "them" si riferisce a un'altra parola nella frase.

Clicca sulla parola "them" nell'applicazione per esplorare quanto fortemente il modello la collega a ciascuna delle altre parole.