Corriger « Site down or unavailable » dans AdSense : rendre votre site accessible aux robots de Google
L'essentiel
- AdSense signale un site comme en panne, indisponible ou inaccessible quand ses robots ne parviennent pas à le charger, même s'il fonctionne dans votre navigateur.
- Le robot AdSense est Mediapartners-Google, et AdSense utilise Google-Display-Ads-Bot pour vérifier un site lorsque vous l'ajoutez.
- Google cite la protection par connexion, les restrictions d'IP ou géographiques, les blocages robots.txt, les pare-feu applicatifs, les erreurs 404, les chaînes de redirections, les problèmes de serveur de noms et les serveurs lents parmi les problèmes d'accès du robot.
- Si vous utilisez HTTPS, Google exige un certificat délivré par une autorité de certification reconnue, pas un certificat auto-signé, et HTTP doit rediriger vers HTTPS.
- Google indique que les modifications d'une page peuvent mettre jusqu'à 1 ou 2 semaines à être prises en compte dans l'index du robot AdSense.

« Site down or unavailable » (formulé « Your site is unreachable », soit « votre site est inaccessible », dans les pages d’aide de Google) signifie que les robots de Google n’ont pas pu charger votre site pendant l’examen. La cause n’est presque jamais une vraie panne : il s’agit le plus souvent du DNS, du HTTPS, d’une redirection, d’une règle robots.txt, d’un blocage par pays ou d’une protection anti-bots qui traite le robot de Google comme un robot indésirable. Corrigez l’accès, vérifiez-le depuis l’extérieur, puis demandez l’examen.
Quels robots doivent pouvoir accéder à votre site ?
AdSense utilise deux robots de Google que vous devez laisser passer :
| Robot | Rôle (selon Google) | Jeton robots.txt |
|---|---|---|
Mediapartners-Google |
“visits your site to determine its content in order to provide relevant ads” (visite votre site pour déterminer son contenu afin de proposer des annonces pertinentes) | Mediapartners-Google |
Google-Display-Ads-Bot |
Utilisé “to verify your site when you add a site to AdSense” (pour vérifier votre site lorsque vous l’ajoutez à AdSense) | Google-Display-Ads-Bot |
La documentation des robots de Google classe Mediapartners-Google parmi les robots à usage spécial (special-case crawlers). Ceux-ci “may ignore robots.txt rules and so they operate from a different IP range than the common crawlers” (peuvent ignorer les règles robots.txt et opèrent donc depuis une plage d’IP différente de celle des robots courants), plage publiée dans un fichier special-crawlers.json, et leur DNS inverse correspond à rate-limited-proxy-***-***-***-***.google.com. Ce détail compte : une liste d’autorisation construite uniquement pour les plages d’IP de Googlebot peut ne pas couvrir le robot AdSense.
Qu’est-ce qui provoque « Site down or unavailable » ?
La page « Fix AdSense crawler issues » de Google regroupe les causes en trois familles. Les voici avec le déclencheur le plus fréquent en pratique.
| Problème selon Google | Déclencheur typique | Solution |
|---|---|---|
| Site protégé par connexion | Préproduction protégée par mot de passe, extension d’adhésion, mode « bientôt disponible » | Retirez la connexion pendant l’examen ; après l’activation, ajoutez un accès pour le robot |
| Réseau ou plage d’IP restreint | Blocage par pays, pare-feu de l’hébergeur, liste d’IP autorisées | Supprimez la restriction ou rendez le contenu public |
| Bloqué dans robots.txt | Un groupe nommant Mediapartners-Google avec Disallow: / |
Supprimez ce groupe |
| Bloqué par un pare-feu applicatif | Protection anti-bots du CDN ou du WAF qui soumet Google à un défi | Laissez le robot contourner le pare-feu |
| Site introuvable | 404 sur l’URL soumise, site non en ligne, mauvais domaine | Publiez le site, corrigez l’URL |
| Redirections multiples | Chaînes du type http vers https vers www vers un dossier de langue | Réduire à une seule redirection |
| Données POST requises | Pages qui ne répondent qu’aux requêtes POST | Servez le contenu en GET |
| Problème de serveur de noms | DNS cassé ou partiellement propagé, règles de DNS géographique | Corrigez la configuration DNS |
| Problème de serveur | Serveur arrêté, lent ou surchargé | Utilisez un hébergement fiable |
La page « not ready » ajoute une exigence HTTPS : si vous utilisez HTTPS, il faut “a valid SSL certificate from a recognized certification authority (not self-signed)” (un certificat SSL valide délivré par une autorité de certification reconnue, pas auto-signé), et HTTP doit rediriger vers HTTPS.
Comment trouver ce qui bloque le robot ?
Procédez de l’extérieur vers l’intérieur. Chaque étape écarte une cause ou la découvre.
1. Confirmer l’URL exacte dans AdSense
Ouvrez « Sites » dans AdSense et relisez l’URL soumise. Une faute de frappe, un www manquant qui ne résout pas ou un ancien domaine est la cause la plus simple. Si l’URL est erronée, supprimez le site puis rajoutez-le avec la bonne URL, comme l’indique Google.
2. Vérifier le DNS et le HTTPS depuis l’extérieur de votre réseau
Depuis un terminal (ou un vérificateur DNS en ligne), confirmez que le domaine nu et www se résolvent, et que le certificat est valide pour le nom soumis :
dig +short example.com
dig +short www.example.com
curl -sI https://example.com/
Un avertissement de certificat, un certificat expiré ou un certificat émis pour un autre nom d’hôte suffit à échouer. Si vous avez récemment changé de DNS ou d’hébergeur, attendez que les anciens enregistrements aient expiré partout avant de demander l’examen.
3. Suivre les redirections
curl -sIL http://example.com/ | grep -iE "^(HTTP|location)"
Vous voulez au plus un saut vers l’URL HTTPS finale, puis un 200. Les chaînes, les boucles, ou un 403, 429 ou 5xx final expliquent l’erreur. Les redirections de langue ou de pays fondées sur l’IP sont un piège fréquent : le robot peut être envoyé vers une version qui n’existe pas.
4. Lire robots.txt
Ouvrez https://example.com/robots.txt et cherchez tout groupe qui nomme Mediapartners-Google ou Google-Display-Ads-Bot avec un Disallow. La page d’aide de Google indique que pour accorder l’accès, il faut supprimer ces lignes :
User-agent: Mediapartners-Google
Disallow: /
Un bloc générique User-agent: * n’est pas le problème pour AdSense : la documentation des robots de Google indique “The global user agent (*) is ignored” (l’agent utilisateur global est ignoré) pour Mediapartners-Google. Il peut toutefois nuire à votre visibilité dans Search, ce qui est un autre sujet.
5. Contrôler pare-feu, protection anti-bots et blocage géographique
C’est la cause la plus fréquente sur des sites par ailleurs sains. Examinez le journal de sécurité de votre CDN ou de votre pare-feu à la recherche de requêtes dont l’agent utilisateur contient Mediapartners-Google ou Google-Display-Ads-Bot et qui ont été bloquées, soumises à un défi ou limitées en débit.
- Blocages par pays. Si vous bloquez ou soumettez à un défi le trafic de certains pays, le robot peut être pris dans le filet. Google cite “Geographic or IP restrictions” (restrictions géographiques ou d’IP) comme cause.
- Défis JavaScript ou CAPTCHA. Un robot ne peut pas les résoudre. Une page de défi équivaut, pour le robot, à un site inaccessible.
- Bot Fight Mode de Cloudflare. La documentation de Cloudflare indique qu’il “cannot be customized, adjusted, or reconfigured via WAF custom rules” et que vous “cannot bypass or skip Bot Fight Mode using WAF custom rules or Page Rules”. Si le journal montre des requêtes Google soumises à un défi par ce mode, le désactiver est l’option pratique pendant l’examen. Cloudflare renvoie vers le Super Bot Fight Mode lorsque des règles d’exemption sont nécessaires.
- Extensions de sécurité de l’hébergeur. Les extensions de sécurité WordPress et les limites de débit côté serveur peuvent bloquer des robots « inconnus ». Autorisez les plages de robots publiées par Google plutôt que de vous fier au seul agent utilisateur ; Google prévient que “the user agent string can be spoofed” (la chaîne de l’agent utilisateur peut être falsifiée).
Tester avec un faux agent utilisateur (curl -A "Mediapartners-Google" ...) ne détecte que les règles fondées sur l’agent utilisateur. Il ne peut pas reproduire un blocage fondé sur l’IP ou la réputation : les journaux sont donc la vraie preuve.
6. Retirer les écrans de connexion et les modes maintenance
Les extensions « bientôt disponible », maintenance et mot de passe renvoient une page de connexion ou un espace réservé aux visiteurs anonymes. Google demande de retirer temporairement la connexion afin qu’AdSense puisse atteindre le site. Après l’activation, vous pouvez configurer une connexion pour le robot sous « Account » (Compte), « Access and authorization » (Accès et autorisation), « Crawler access » (Accès du robot) ; Google exige pour cela que le site soit validé dans Search Console.
7. Contrôler la fiabilité du serveur
Un site qui dépasse le délai sous charge, ou un hébergeur gratuit qui se met en veille quand il est inactif, peut être hors service précisément au moment où le robot passe. Consultez l’historique de disponibilité et les temps de réponse pour la période d’examen.
Après la correction : comment redemander l’examen ?
- Confirmez depuis un autre réseau (un téléphone en données mobiles suffit) que la page d’accueil et plusieurs pages internes se chargent sans défi ni connexion.
- Dans AdSense, cliquez sur « Sites », puis sur le site.
- Vérifiez que le code est en place, cliquez sur « Next » (Suivant), puis sur « Request review » (Demander un examen).
Google indique que l’examen prend généralement quelques jours mais peut durer 2 à 4 semaines. Il précise aussi que les modifications côté robot “may take up to 1 or 2 weeks” à apparaître dans son index : ne vous alarmez donc pas si l’état ne change pas le lendemain. La signification de chaque état est détaillée dans Les états des sites AdSense expliqués.
Erreurs courantes
- Tester uniquement depuis votre propre ordinateur. Votre IP, vos cookies et votre session sont autorisés par habitude ; ceux du robot ne le sont pas.
- N’autoriser que Googlebot. AdSense utilise d’autres robots, et
Mediapartners-Googleest un robot à usage spécial avec ses propres plages d’IP. - Laisser un défi actif « seulement pour certains pays ». Vous ne contrôlez pas d’où viennent les requêtes du robot, et Google cite les restrictions géographiques comme cause.
- Changer d’hébergeur ou de DNS pendant un examen. Terminez les migrations avant de soumettre.
- Ne corriger que la page d’accueil. L’examen peut porter sur toutes les pages. Une règle WAF qui protège différemment
/blog/ou/wp-json/peut tout de même le faire échouer. - Le confondre avec l’état ads.txt. Un ads.txt « Introuvable » est un autre signal, avec d’autres causes ; voir ads.txt « Not found » et « Unauthorized ».
Les hébergeurs statiques et les plateformes Jamstack ont leurs propres variantes de ces problèmes (déploiements de prévisualisation, barres obliques finales, protection anti-bots de la plateforme) ; voir AdSense sur les sites statiques et Jamstack.
Questions fréquentes
Mon site fonctionne dans mon navigateur. Pourquoi AdSense le dit-il indisponible ?
Votre navigateur n'est pas le robot de Google. Le robot arrive depuis les plages d'IP de Google, sans vos cookies ni votre session, sans résoudre les défis JavaScript et avec son propre agent utilisateur. Un pare-feu, un filtre anti-bots, un blocage par pays ou un écran de connexion peut vous laisser entrer et l'arrêter. Testez depuis l'extérieur de votre réseau et cherchez dans les journaux du serveur ou du CDN les requêtes Google bloquées.
Bloquer tous les robots avec User-agent: * dans robots.txt bloque-t-il AdSense ?
Pas pour les pages avec annonces. La documentation des robots de Google indique que l'agent utilisateur global (*) est ignoré par Mediapartners-Google, et la page du robot AdSense précise que les pages exclues par User-agent: * sont tout de même explorées. Seul un groupe qui nomme Mediapartners-Google ou Google-Display-Ads-Bot les bloque.
Combien de temps après la correction AdSense verra-t-il mon site ?
Google ne donne aucun délai fixe pour l'exploration liée à l'examen. Sa page sur le robot indique que les modifications d'une page peuvent mettre jusqu'à 1 ou 2 semaines à apparaître dans son index, et l'examen du site lui-même prend généralement quelques jours mais peut durer 2 à 4 semaines. Ne demandez l'examen qu'après avoir confirmé la correction depuis l'extérieur de votre réseau.
Puis-je garder le Bot Fight Mode de Cloudflare actif pendant ma candidature AdSense ?
Avec prudence. La documentation de Cloudflare indique que le Bot Fight Mode ne peut pas être contourné par des règles personnalisées WAF ni des Page Rules : vous ne pouvez donc pas y prévoir d'exception pour un robot précis. Si vos journaux montrent des requêtes Google soumises à un défi, désactivez-le pendant l'examen ou utilisez une configuration qui permet des règles d'exemption.
Sources
- What to do when your site is not ready to show ads · Google AdSense Help
- Fix AdSense crawler issues · Google AdSense Help
- About the AdSense ads crawler · Google AdSense Help
- Google's special-case crawlers · Google for Developers
- Bot Fight Mode · Cloudflare Docs
Guides liés
- Liste de contrôle pour l'approbation AdSense : tout vérifier avant de demander l'examen du site
Liste de contrôle AdSense avant demande d'examen, fondée sur les règles d'éligibilité, la configuration du compte et les motifs de refus indiqués par Google.
- États des sites AdSense expliqués : ce que signifie chaque état de la page Sites et quoi faire
Sens de « Examen requis », « Préparation », « Attention requise » et « Prêt » sur la page Sites d'AdSense, colonne ads.txt et prochaine étape.
- ads.txt « Introuvable » ou « Non autorisé » : liste de contrôle technique (redirections, HTTPS, codes de statut, robots.txt)
Diagnostiquer les statuts ads.txt Introuvable et Non autorisé : domaine racine, www, HTTP et HTTPS, redirections, 404, robots.txt, type de contenu, tests curl.
- Faire approuver un site statique ou Jamstack par AdSense
Faire approuver un site statique ou Jamstack par AdSense : emplacement du code et d'ads.txt, pièges des sous-domaines de plateforme et des aperçus.