PerplexityBot

PerplexityBot est le crawler de Perplexity, chargé d'indexer les pages dans le réservoir de sources sur lequel son moteur de réponse s'appuie pour récupérer et citer, fonctionnant comme l'équivalent crawler de l'approche de récupération en temps réel et citation-first de Perplexity. Contrairement à certains concurrents, Perplexity fait tourner un seul crawler principal plutôt que de séparer les fonctions d'entraînement et de citation.

Pourquoi c'est important

Perplexity utilisant un seul crawler à la fois pour la découverte et la citation, bloquer PerplexityBot retire entièrement une page de Perplexity, sans équivalent de la séparation qu'OpenAI ou Anthropic opèrent entre un bot réservé à l'entraînement et un bot dédié à la citation.

Termes associés

• Perplexity

  Perplexity est un moteur de recherche natif IA construit autour de citations intégrées et numérotées, où presque chaque affirmation de ses réponses renvoie directement à une source précise. Il se positionne explicitement comme un moteur de réponse citation-first, et sa récupération privilégie les pages récemment publiées et directement pertinentes plutôt que les pages à forte autorité éditoriale accumulée.

• Récupération en temps réel

  La récupération en temps réel est la stratégie de récupération caractéristique de Perplexity : privilégier les sources récemment publiées et directement pertinentes plutôt que les pages avec une autorité éditoriale accumulée plus lourde. Plutôt que de s'appuyer sur la réputation de long terme d'un domaine, l'index de Perplexity favorise la page qui répond le plus précisément à la requête immédiate, mis à jour en continu à mesure que de nouvelles pages sont publiées ou que d'anciennes sont révisées.

• robots.txt (directives IA)

  robots.txt est le fichier standard de contrôle des crawlers, présent à la racine d'un site depuis longtemps, désormais étendu avec des règles spécifiques par user-agent pour des crawlers IA comme GPTBot, ClaudeBot et PerplexityBot. Un même fichier robots.txt peut autoriser le crawl classique des moteurs de recherche tout en bloquant un ou plusieurs crawlers IA, ou l'inverse.