Définition
Attention (mécanisme d')
La technique qui permet aux modèles de langage de comprendre quels mots d'une phrase sont liés entre eux, même s'ils sont éloignés. C'est le cœur des Transformers.
Envie de passer de la théorie à la pratique ? Ces notions sont au cœur du Pilier 1 de Déclic IA, où l'on apprend à s'en servir pas à pas, sans jargon.
Découvrir le Pilier 1