Votre site reçoit bien plus de robots que de visiteurs humains. La plupart sont indésirables : ils cherchent une faille, inondent vos formulaires, aspirent vos contenus. C’est pour eux qu’on installe des protections, et elles font leur travail.
Depuis quelques mois, une autre catégorie frappe à la porte. Des agents envoyés par des assistants IA, qui viennent chercher une information ou accomplir une démarche pour le compte d’un de vos clients. Eux, vous avez plutôt intérêt à les laisser entrer. Le problème est que votre site n’a pas appris à les distinguer des autres.
C’est précisément ce que Google a entrepris de corriger le 17 novembre. Pour ce nouveau rendez-vous des Mercredis de l’IA, on vous explique ce que cela change.
Un visiteur d’un nouveau genre
Jusqu’ici, deux types de visiteurs fréquentaient votre site. Des humains avec un navigateur, et des robots d’indexation qui lisaient vos pages pour alimenter les moteurs de recherche. Googlebot appartient à cette seconde famille, et c’est pour lui qu’on travaille le référencement depuis vingt ans.
Un agent IA fonctionne autrement. Il ne se déclenche pas tout seul : il part en mission parce qu’une personne le lui a demandé. Quelqu’un cherche une table pour six samedi soir, un créneau de réparation dans la semaine, ou trois devis pour des travaux. L’agent se rend sur les sites concernés, cherche à l’intérieur, applique des filtres, ouvre des fiches, remplit des champs, et revient avec une réponse.
La nuance compte. Votre site est bien consulté, mais c’est une machine qui le lit, et votre futur client ne le voit pas. S’il bute sur votre moteur de recherche interne ou sur votre formulaire, il repart les mains vides, et la personne reçoit une réponse construite avec les informations de quelqu’un d’autre.
Ce que Google a publié le 17 novembre
Google a mis en ligne le 17 novembre 2026 une page destinée aux propriétaires de sites, intitulée « Allow Google-Agent traffic ». Elle explique comment autoriser explicitement ce trafic tout en conservant les protections de sécurité en place. L’entrée correspondante figure au journal des modifications de la documentation de Google.
L’agent lui-même existait déjà : Google l’avait ajouté à sa documentation le 20 mars 2026, sous le nom de Google-Agent. Ce qui change avec cette publication, c’est que Google prend la peine d’écrire le mode d’emploi à destination des éditeurs. [Inférence] Quand un acteur de cette taille publie ce type de guide, c’est généralement que le trafic a commencé à arriver et que les blocages se multiplient.
Un détail a son importance : Google classe cet agent parmi les récupérateurs déclenchés par un utilisateur, et ces derniers ignorent généralement les règles du fichier robots.txt, justement parce que la demande vient d’une personne réelle. Le fichier par lequel on règle d’habitude l’accès des robots n’est donc pas le bon levier. Ce qui décide, ce sont vos protections.
Pourquoi un site bien protégé peut dire non
Un site peut être parfaitement référencé par Google et rester inaccessible à un agent. Ce n’est pas une anomalie, c’est le comportement normal d’un site correctement défendu.
Vos protections fonctionnent sur un principe simple : écarter ce qui ne ressemble pas à un visiteur humain. Or un agent ne ressemble pas à un visiteur humain. Il arrive depuis des adresses d’hébergeur, enchaîne les requêtes rapidement, et déclenche exactement les réflexes que vos défenses guettent. Le test de vérification de votre formulaire, celui qui vous protège du spam, l’arrête net. La limite de requêtes qui vous met à l’abri des surcharges le considère comme une menace.
La page publiée par Google est éclairante sur ce point. Sa partie dépannage énumère ce qui bloque le plus souvent : les règles qui écartent en masse les visites venues d’hébergeurs, les politiques qui refusent les agents IA par catégorie, les tests de vérification déclenchés lors d’une recherche ou de l’envoi d’un formulaire, et les limites de requêtes par adresse.
Autrement dit, si personne n’a réglé la question chez vous, la réponse par défaut est non.
Reconnaître un bon robot d’un mauvais
La tentation serait de tout ouvrir. Ce serait une mauvaise idée, et Google le dit à sa façon.
Un agent légitime se reconnaît à trois éléments. Il se présente sous un nom précis dans sa carte de visite technique. Il arrive depuis une liste d’adresses que Google publie et tient à jour. Et, pour une partie des requêtes, il porte une signature électronique vérifiable, que Google expérimente actuellement.
Le premier élément ne suffit pas, parce qu’un nom se falsifie : n’importe quel robot malveillant peut se déclarer agent de Google. Google le signale explicitement. Ce qui fait la différence entre une autorisation et une faille, c’est la vérification des deux autres.
C’est donc un travail d’ajustement, pas d’ouverture. On crée une exception étroite, vérifiée, prioritaire sur les blocages généraux, qui écarte les tests de vérification pour ce visiteur précis et laisse l’ensemble des protections en place pour tout le reste.
Google n’est d’ailleurs pas seul sur ce terrain. OpenAI documente plusieurs robots, dont un qui consulte les pages uniquement quand un utilisateur pose une question à ChatGPT. Perplexity fait de même, publie la liste des adresses utilisées par chacun de ses agents, et recommande de croiser le nom et l’adresse plutôt que de se fier au seul nom. Chacun a sa liste, ses noms et ses mises à jour. C’est pour cette raison que le sujet relève de la maintenance d’un site plutôt que d’un réglage fait une fois pour toutes.
Ce que nous ajustons de notre côté
C’est exactement la raison d’être de ce rendez-vous hebdomadaire. Nous suivons l’actualité de l’IA chaque semaine, et quand une annonce a des conséquences concrètes sur les sites que nous avons construits, nous en tirons les conséquences dans notre façon de travailler.
Cette publication de Google en fait partie. Elle entre dans nos vérifications de maintenance, au même titre que les mises à jour, la surveillance des formulaires ou le suivi des performances. Pour les entreprises dont nous suivons un parc de plusieurs sites, l’intérêt est de traiter la question une fois et de l’appliquer partout, avec le même niveau de sécurité et le même suivi dans le temps.
Nous travaillons depuis 2007 à Brest, avec une production entièrement interne, ce qui nous permet d’ajuster un réglage technique sans passer par trois intermédiaires. C’est aussi le prolongement de ce que nous écrivions à propos des six erreurs à éviter avec l’IA en entreprise et de la façon de vérifier si votre entreprise est citée par ChatGPT : être visible et être accessible sont deux choses différentes, et les deux se travaillent.
Et pour votre site ?
La question se résume à peu de chose : votre site est-il capable de distinguer un visiteur légitime d’une tentative d’intrusion, et qui s’en occupe ?
Si vous ne connaissez pas la réponse, c’est le moment de regarder. Nous examinons votre site, ce qui filtre les visites aujourd’hui, ce que montrent vos journaux de connexion, et les points de votre parcours qui mériteraient d’être rendus accessibles : votre moteur de recherche interne, votre formulaire, votre prise de rendez-vous. Vous repartez avec un état des lieux clair et la liste de ce qu’il y aurait à ajuster, que vous nous confiiez ensuite le travail ou non. C’est valable pour un site comme pour un parc de plusieurs sites, et cela va de pair avec le référencement naturel et la maintenance de votre site.
Parlons de votre projet.
Rendez-vous mercredi prochain à 11 h pour un nouveau numéro des Mercredis de l’IA.
Questions fréquentes
Qu'est-ce qu'un agent IA pour un site internet ?
C'est un programme envoyé par un assistant IA à la demande d'une personne, qui se rend sur un site pour y chercher une information ou accomplir une démarche. Il se distingue d'un robot d'indexation, qui parcourt les pages automatiquement pour alimenter un moteur de recherche.
Mon site peut-il bloquer ces agents sans que je le sache ?
C'est possible, et c'est même la réponse par défaut d'un site bien protégé. Les dispositifs de sécurité écartent ce qui ne ressemble pas à un visiteur humain. Un site bien référencé peut donc rester inaccessible à un agent. Cela se vérifie dans les journaux de connexion et dans les réglages de sécurité.
Laisser entrer les agents IA fragilise-t-il la sécurité du site ?
Pas si l'autorisation est vérifiée. Il s'agit d'une exception étroite reposant sur l'identification de l'agent, sur une liste d'adresses publiée par Google et, pour une partie des requêtes, sur une signature électronique. Un nom seul se falsifie, ce que Google signale : la vérification est donc ce qui distingue une autorisation d'une faille. Les protections générales restent actives pour tout le reste.
Le fichier robots.txt permet-il de gérer ces agents ?
Pas vraiment. Google classe son agent parmi les récupérateurs déclenchés par un utilisateur, et ceux-ci ignorent généralement les règles du robots.txt. Le réglage se situe du côté des dispositifs qui filtrent les visites avant qu'elles n'atteignent le site.
Autoriser ces agents améliore-t-il mon référencement ?
Rien ne le laisse penser à ce stade, et Google ne le présente pas comme un facteur de classement. L'enjeu porte sur l'accessibilité du site aux agents, pas sur sa position dans les résultats de recherche.
Faut-il le faire sur tous les sites ?
Cela dépend de l'activité. Un site qui propose une réservation, une prise de rendez-vous, un devis ou un catalogue a davantage à y gagner qu'un site exposant des informations sensibles ou des tarifs négociés. Le choix mérite d'être fait volontairement plutôt que subi.
Sources : Google, « Allow Google-Agent traffic », documentation de l’infrastructure de crawl, page mise à jour le 17 novembre 2026 ; Google, « List of Google user-triggered fetchers » ; Google, « Google’s Crawling Documentation Changelog », entrée du 17 novembre 2026 ; OpenAI, « Overview of OpenAI Crawlers » ; Perplexity, « Perplexity Crawlers ».