Outils gratuits · Outil gratuit · sans inscription

Vérificateur robots.txt pour les IA (GPTBot, ClaudeBot, PerplexityBot)

Beaucoup de sites bloquent les robots des IA sans le savoir, souvent à cause d'un réglage de leur hébergeur ou d'une extension de sécurité. Résultat : ChatGPT ou Perplexity ne peuvent pas lire leurs pages, et ne les recommandent jamais. Cet outil lit ton robots.txt comme le ferait chaque robot.

Comment ça marche

  1. 1Entre l'adresse de ton site (ou d'une page précise).
  2. 2On lit ton robots.txt et on applique les règles de chaque robot d'IA, un par un.
  3. 3Si un robot est bloqué, on te donne les lignes exactes à ajouter pour le débloquer.

Questions fréquentes

Quelle différence entre robots de recherche et d'entraînement ?

Les robots de recherche (OAI-SearchBot, PerplexityBot, Claude-SearchBot) lisent ton site au moment où quelqu'un pose une question : les bloquer t'empêche d'être cité. Les robots d'entraînement (GPTBot, ClaudeBot, Google-Extended) servent à apprendre aux modèles : les bloquer est un choix possible, mais l'IA connaîtra moins bien ta marque.

Bloquer Google-Extended me retire-t-il de Google ?

Non. Google-Extended ne concerne que l'usage de tes pages par Gemini pour s'entraîner. Ton référencement Google classique dépend de Googlebot, qui n'est pas touché.

Est-ce que le llms.txt est obligatoire ?

Non, ce n'est pas un standard officiel. C'est un bonus simple : un résumé de ton site que certaines IA peuvent lire.

Envie de voir tout ce qui bloque ton site ?

L'audit gratuit analyse les 7 piliers du référencement, sur Google et dans les IA. Résultat en une minute.

Les autres outils gratuits