Position-Adjusted Word Count (PAWC)

Le Position-Adjusted Word Count, ou PAWC, est l'indicateur que l'étude GEO de Princeton et de l'IIT Delhi (arXiv 2311.09735) utilise pour noter la visibilité d'une source au sein d'une réponse générée par l'IA, en pondérant le nombre de mots de cette source qui apparaissent dans la réponse et leur position, les contenus apparaissant plus tôt étant pondérés plus fortement.

Pourquoi c'est important

Le PAWC est l'outil de mesure central de l'étude, et le comprendre clarifie ce que les tactiques GEO optimisent réellement : non pas simplement si une source est mentionnée, mais quelle part de la substance de la réponse, et à quelle position bien visible, le contenu de cette source parvient réellement à obtenir.

Termes associés

• GEO-bench

  GEO-bench est le benchmark construit par l'étude GEO de Princeton et de l'IIT Delhi pour tester et comparer des tactiques d'optimisation, composé de 10 000 requêtes réparties sur 8 domaines différents, utilisé comme jeu de données standardisé sur lequel chaque tactique de l'étude, de l'ajout de statistiques au bourrage de mots-clés, a été mesurée.

• Impression subjective

  L'impression subjective est le score évalué par des humains, utilisé dans l'étude GEO de Princeton, pour mesurer à quel point une source paraît visible et proéminente au sein d'une réponse générée par IA, recueilli en faisant lire la réponse à des évaluateurs humains et juger directement la présence d'une source, en complément de la métrique automatisée PAWC.

• Position dans la réponse

  La position dans la réponse indique où se situe la mention ou la citation d'une marque au sein d'une réponse générée par l'IA, qu'elle soit citée en premier ou en dernier, et à quel rang elle apparaît dans la liste des sources citées affichée à côté de la réponse.