Google : deux raisons courantes pour lesquelles un pic d'exploration est mauvais

Gary Illyes de Google a publié sur LinkedIn deux exemples courants de cas où un pic d'activité de Googlebot, l'exploration, est une mauvaise chose. La réponse courte est lorsque Googlebot commence à explorer une section infinie de votre site (comme des pages de calendrier qui s'étendent indéfiniment) et lorsque votre site est piraté avec une tonne de nouvelles pages piratées.

Il s'agit probablement d'éléments de référencement très basiques pour la plupart d'entre vous, mais il pourrait y avoir une raison pour laquelle il partage cela maintenant.

Gary a écrit : « Ne vous réjouissez pas prématurément lorsque les moteurs de recherche commencent à explorer votre site comme un fou. » « Une augmentation soudaine du nombre de rampements peut signifier de bonnes choses, bien sûr, mais cela peut aussi signifier que quelque chose ne va pas », a-t-il ajouté.

Dans ces cas, a-t-il déclaré, « Traitez les augmentations soudaines et inattendues de l’exploration comme le symptôme d’un problème jusqu’à ce que vous puissiez prouver le contraire. » Puis il a plaisanté : « Ou, vous savez, peut-être que je suis juste un pessimiste pur et dur. »

Voici deux problèmes qui reviennent trop souvent lorsque l’on observe une forte augmentation du crawl, écrit-il :

Espaces infinis :

L'exemple sur les espaces infinis qu'il a donné est l'un des plus courants. Lorsque « vous avez un calendrier sur votre site ou une page de listes de produits filtrable à l'infini. Si votre site contient généralement des pages que les utilisateurs de recherche trouvent utiles, les robots d'exploration seront enthousiasmés par ces espaces infinis pendant un certain temps. robots.txt est votre ami, utilise le. »

Contenu piraté :

Un autre exemple courant est le contenu piraté. Il a déclaré : « Si un malfaiteur parvenait d'une manière ou d'une autre à accéder au système de fichiers de votre serveur ou à votre système de gestion de contenu, il pourrait inonder votre site, par ailleurs excellent, de conneries. Si votre site contient généralement des pages que les utilisateurs trouvent lors des recherches. utile, les robots seront enthousiasmés par ces nouvelles pages pendant un certain temps et les exploreront avec plaisir. https://web.dev/hacked propose d'excellentes ressources sur ce qu'il faut faire dans ces cas (tangente : oui, c'est plus du piratage que du piratage, mais. Apparemment, Internet accepte ce terme impropre). »

Discussion sur le forum sur LinkedIn.