GEO-bench

GEO-bench est le benchmark construit par l'étude GEO de Princeton et de l'IIT Delhi pour tester et comparer des tactiques d'optimisation, composé de 10 000 requêtes réparties sur 8 domaines différents, utilisé comme jeu de données standardisé sur lequel chaque tactique de l'étude, de l'ajout de statistiques au bourrage de mots-clés, a été mesurée.

Pourquoi c'est important

GEO-bench est ce qui donne leur crédibilité aux pourcentages d'amélioration de l'étude : chaque tactique a été testée sur le même benchmark de 10 000 requêtes et 8 domaines plutôt que sur un jeu de données restreint ou choisi après coup, ce qui rend les comparaisons entre tactiques significatives plutôt qu'anecdotiques.

Termes associés

• Position-Adjusted Word Count (PAWC)

  Le Position-Adjusted Word Count, ou PAWC, est l'indicateur que l'étude GEO de Princeton et de l'IIT Delhi (arXiv 2311.09735) utilise pour noter la visibilité d'une source au sein d'une réponse générée par l'IA, en pondérant le nombre de mots de cette source qui apparaissent dans la réponse et leur position, les contenus apparaissant plus tôt étant pondérés plus fortement.

• Ajout de statistiques

  L'ajout de statistiques est la tactique testée par l'étude GEO de Princeton consistant à remplacer des affirmations vagues par des chiffres, des sources et des dates précis, mesurée par l'étude comme sa tactique la plus performante, produisant jusqu'à environ 41 % d'amélioration sur sa métrique de visibilité PAWC.

• Effet d'égalisation

  L'effet d'égalisation est la découverte de l'étude GEO de Princeton selon laquelle les citations permettent à des sources moins bien classées, comme une page en cinquième position en recherche classique, d'atteindre des gains de visibilité disproportionnés au sein d'une réponse générée par l'IA par rapport à leur rang organique, un résultat réellement contre-intuitif compte tenu de l'importance de la position dans la recherche classique.