Metindeki kelimeler arasındaki ilişkiyi dikkat mekanizmasıyla ölçen sinir ağı mimarisi.
Transformer, kelimeler arasındaki ilişkiyi “öz-dikkat” (self-attention; her kelimenin diğerlerine ne kadar bakacağını hesaplama) yöntemiyle ölçen bir yapay sinir ağı mimarisidir (modelin iç yapısı). Bugünkü büyük dil modellerinin çoğu bu yapıya dayanır. Bir cümlede “o” sözcüğünün kime ya da neye gittiğini bulmaya yardım ettiği için metni daha tutarlı üretir.
Sitenin giderlerini karşılamak için Google reklamları gösteriyoruz. Google, reklam seçmek ve ölçmek için çerez kullanır. Kabul ederseniz reklamlar gösterilir ve bu veriler yurt dışındaki Google sunucularına aktarılır. Reddederseniz reklam gösterilmez, reklam çerezi de oluşmaz. Ayrıntılar: Çerez Politikası · KVKK Aydınlatma Metni