en bref il s' agit d' une méthode permettant de contextualiser beaucoup plus profondément le sens de chaque mot grâce à la prise en compte de la position du mot dans la phrase et à un mécanisme dit attentionnel qui permet à l' algorithme de mettre en relation des unités linguistiques distantes de manière à faire le lien entre sujet verbe et complément d' objet direct dans une phrase longue du type le gamin de huit ans mange une belle pomme ou à prendre en compte le contexte sémantique liant les différentes phrases d' un même paragraphe