Detaylı Açıklama
Transformer mimarisi, "attention" (dikkat) mekanizmasıyla bir dizideki tüm öğelerin birbiriyle ilişkisini paralel olarak hesaplar. Google araştırmacılarının "Attention Is All You Need" makalesiyle tanıttığı bu mimari, GPT ve benzeri tüm modern modellerin temelidir.