Google : à l’aide d’un CDN ou d’un hébergement cloud, configurez des tests de routine pour vous assurer que Googlebot n’est pas bloqué

Gary Illyes de Google adore publier ses messages d’intérêt public sur Mastodon. Son prochain message d’intérêt public est que si vous utilisez un CDN ou un service d’hébergement cloud, assurez-vous de tester un test de routine pour vous assurer que le service ne bloque pas Googlebot ou d’autres robots de moteur de recherche que vous souhaitez explorer et indexer votre site.

Gary a écrit sur Mastodonte « Si vous vous souciez de la visite de Googlebot/Bingbot/otherBot sur votre site et que vous utilisez des solutions telles que CDN ou f5, vous devriez prendre l’habitude de parcourir de temps en temps les règles de pare-feu générées automatiquement par certaines de ces solutions. Parfois, elles percevez le trafic des crawlers comme malveillant et bloquez-le. »

En règle générale, il s’agit d’une bonne pratique pour tous les aspects de votre site Web ou de votre logiciel. Vous devez configurer des tests de routine que vous pouvez exécuter manuellement selon un calendrier ou simplement configurer pour qu’ils s’exécutent de manière automatisée et être informé du résultat. Si Googlebot est bloqué, vous pouvez sauter dessus avant que cela ne devienne un problème plus important. Si votre formulaire de carte de crédit est cassé, vous pouvez sauter dessus avant de perdre de nombreuses commandes. La mise en place de tests automatisés ou de routine pour des sites ou des logiciels n’est qu’une bonne pratique et devrait peut-être être effectuée pour voir si des robots ou des personnes sont restreints sur votre site Web.

Forum de discussion sur Mastodonte.