Non, Reddit ne bloque pas la recherche Google
Aujourd'hui, le 4 juillet, j'éviterais normalement d'écrire des articles ici, mais de nombreuses rumeurs circulent selon lesquelles Reddit empêche Google Search d'explorer et d'indexer son contenu. Ce n'est pas vrai : Reddit ne bloque pas Google Search.
Je veux dire, à première vue, il semble que le fichier robots.txt de Reddit bloque tous les moteurs de recherche, y compris Google Search :

Mais c’est exactement ce que vous et moi voyons.
Si vous y accédez à partir du test Google Rich Results, comme si vous y accédiez réellement à partir des plages IP de Google, vous voyez que Google est effectivement autorisé :

De plus, essayez simplement de voir si cet outil peut accéder à la page d'accueil de Reddit – il le peut et est autorisé :

Je veux dire, penser que Reddit bloque Google est un peu fou. Que Reddit fasse réellement cela est encore plus insensé. Reddit est payé par Google pour ce contenu et Reddit reçoit une quantité incroyable de trafic provenant de Google Search.
Beau travail d'enquête Pedro Dias sur X et Ryan Siddle ici.
Voici ce qu'ils montrent à Google :
# Notre fichier robots.txt est destiné aux moteurs de recherche
#80jambes
Agent utilisateur : 008
Interdire : /Le nouveau crawler de #80legs
Agent utilisateur : voltron
Interdire : /Agent utilisateur : bender
Interdire : /my_shiny_metal_assAgent utilisateur : Gort
Interdire : /terreAgent utilisateur : MJ12bot…
— Pedro Dias (@pedrodias) 4 juillet 2024
Alors vous pouvez tous vous détendre, Reddit sera toujours classé au-dessus de vous pour tout votre contenu dans la recherche Google…
Discussion sur le forum chez X.
