« Encodage positionnel » : différence entre les versions


Aucun résumé des modifications
Aucun résumé des modifications
 
Ligne 1 : Ligne 1 :
== Définition ==
== Définition ==
Méthode des '''[[Réseau autoattentif|réseaux autoattentifs]]''' qui aide à préserver l’ordre séquentiel des '''[[segment textuel|segments textuels]]''' (tokens) en ajoutant des informations sur la position de chaque '''[[Segment textuel|segment]]''' dans la séquence, ce qui leur permet d’avoir une meilleure compréhension '''[[Fenêtre contextuelle|contextuelle]]''' et d’éviter les problèmes de symétrie.
Méthode des '''[[Réseau autoattentif|réseaux autoattentifs]]''' qui aide à préserver l’ordre séquentiel des '''[[jeton textuel|jetons textuels]]''' (tokens) en ajoutant des informations sur la position de chaque '''[[jeton textuel|segment]]''' dans la séquence, ce qui leur permet d’avoir une meilleure compréhension '''[[Fenêtre contextuelle|contextuelle]]''' et d’éviter les problèmes de symétrie.


== Français ==
== Français ==

Dernière version du 9 juin 2026 à 14:54

Définition

Méthode des réseaux autoattentifs qui aide à préserver l’ordre séquentiel des jetons textuels (tokens) en ajoutant des informations sur la position de chaque segment dans la séquence, ce qui leur permet d’avoir une meilleure compréhension contextuelle et d’éviter les problèmes de symétrie.

Français

encodage positionnel

Anglais

positional encoding

PE

Sources

Source : kdnuggets

Source : TERMIUM Plus

Contributeurs: Arianne Arel, Patrick Drouin, wiki