Transformer tabanlı modellerde, tek bir dizideki belirteçler arasındaki ilişkileri hesaplamak için kullanılan ve modelin çıktısını oluştururken girdinin farklı bölümlerine katılmasını sağlayan bir mekanizma.