Réduire la vitesse d'exploration de Googlebot

Google dispose d'algorithmes perfectionnés qui déterminent la vitesse d'exploration optimale pour chaque site. Notre objectif est d'explorer autant de pages de votre site que possible à chaque visite, sans surcharger la bande passante de votre serveur. Dans certains cas, l'exploration de votre site par Google peut entraîner une surcharge critique sur votre infrastructure ou des coûts indésirables lors d'une panne. Pour remédier à ce problème, vous pouvez décider de réduire le nombre de requêtes effectuées par Googlebot.

Si vous devez réduire la vitesse d'exploration de manière urgente pendant une courte période (par exemple, quelques heures, ou un à deux jours), renvoyez un code d'état de réponse HTTP 500, 503 ou 429 au lieu de 200 aux demandes d'exploration. Googlebot réduit la vitesse d'exploration de votre site lorsqu'il rencontre un nombre important d'URL avec des codes d'état de réponse HTTP 500, 503 ou 429 (par exemple, si vous avez désactivé votre site). La vitesse d'exploration réduite affecte le nom d'hôte complet de votre site (par exemple, subdomain.example.com) et l'exploration des URL renvoyant des erreurs ainsi que de celles qui renvoient du contenu. Une fois le nombre d'erreurs réduit, la vitesse d'exploration recommence à augmenter automatiquement.

Gardez à l'esprit qu'une forte augmentation de l'exploration peut être due à une structure inefficace de votre site ou à des problèmes avec votre site à d'autres égards. Consultez notre guide pour optimiser l'efficacité de l'exploration.

S'il n'est pas possible d'envoyer des erreurs à Googlebot sur votre infrastructure, envoyez une demande spéciale afin de réduire la vitesse d'exploration. Notez que vous ne pouvez pas demander d'augmentation de la vitesse d'exploration.