Googlebot se cache maintenant [Attention]

Walid · #1 2015-12-12 12:49:39

Avec certaines IP Googlebot que je n'avais jamais vu auparavant, impossible de faire un reverse dns. La fonction gethostbyadrr($ip) renvoie tout simplement l'adresse ip et rien d'autres. Impossible donc de savoir que vous avez à faire à Google. Y a différentes stratégies pour sécuriser le cloacking en conséquence, mais elles ont des avantages et inconvénients.

Tout d'abord est ce que vous avez remarqué ces nouvelles IP Googlebot ?

GuillaumeP · #2 2015-12-12 13:07:11

Tu nous donnes une des ips ?

Walid · #3 2015-12-12 13:17:11

GuillaumeP a écrit :

Tu nous donnes une des ips ?

ce serait un bon point de départ : voici le range 162.158.168

davidc1 · #4 2015-12-12 13:24:20

Où est le problème?
Si tu sais que c'est des i0 google, traite les comme telle

Walid · #5 2015-12-12 13:26:48

davidc1 a écrit :

Où est le problème?
Si tu sais que c'est des i0 google, traite les comme telle

Si il fait le coup que sur cet ip range alors y a pas de pb, le souci c'est qu'il va avoir bientôt pleins de nouvelles ip, et si tu peux pas faire de reverse dns, comment tu fais pour détecter l'ip la première fois ?

davidc1 · #6 2015-12-12 13:31:14

Comment sais tu dans ce cas là que c'est gbot ?

Walid · #7 2015-12-12 15:09:14

<php echo $_SERVER['REMOTE_ADDR];?>

1) Tu peux visualiser la page comme Googlebot sur search console
2) Tu peux attendre une mise en cache de la page par Google et checker l'Ip

Il est possible que tout cela soit finalement une montagne qui accouche d'une souris, Sylvain Dauré m'a mis la puce à l'oreille avec Cloudflare... à priori il n'est pas installé mais il se peut qu'il y ait une autre explication du même style. On vous tiens informés

Walid · #8 2015-12-12 15:26:35

Le site en question a visiblement CloudFlare installé... donc pour ceux qui sont dans ce cas, la solution devrait être de récupérer la vraie adresse ip du visiteur via $_SERVER["HTTP_CF_CONNECTING_IP"] et non pas $_SERVER["REMOTE_ADDR"]

jeromeweb · #9 2015-12-12 16:21:07

Merci de l'astuce Bigorno!

Mitsu · #10 2015-12-12 19:08:07

Thx, et si tu fais un echo de l'user agent ça donne quoi ?

Walid · #11 2015-12-12 20:32:39

Bon ben non les mecs l'astuce tombe à l'eau car ca va pas du tout comme solution et c'est logique d'ailleurs (merci à Sylvain Deauré pour la mise en garde).

Ok CloudFlare nous renvoie l'IP de Googlebot https://twitter.com/SylvainDeaure/status/675702152153718785

Sauf qu'on ne maîtrise pas quelle version du cache va être retournée. Je vais quand même creusé j'ai snippé une discussion là dessus sur BHW mais j'avais pas la tête à ça.

Cyd · #12 2015-12-14 05:35:00

Vraiment étrange cette histoire de CloudFlare ...

Ce qui est sûr c'est que le problème vient de là. Voici un aperçu Search Console :

🟣 Googlebot se cache maintenant [Attention]

#1 2015-12-12 12:49:39

Googlebot se cache maintenant [Attention]

#2 2015-12-12 13:07:11

Re : Googlebot se cache maintenant [Attention]

#3 2015-12-12 13:17:11

Re : Googlebot se cache maintenant [Attention]

#4 2015-12-12 13:24:20

Re : Googlebot se cache maintenant [Attention]

#5 2015-12-12 13:26:48

Re : Googlebot se cache maintenant [Attention]

#6 2015-12-12 13:31:14

Re : Googlebot se cache maintenant [Attention]

#7 2015-12-12 15:09:14

Re : Googlebot se cache maintenant [Attention]

#8 2015-12-12 15:26:35

Re : Googlebot se cache maintenant [Attention]

#9 2015-12-12 16:21:07

Re : Googlebot se cache maintenant [Attention]

#10 2015-12-12 19:08:07

Re : Googlebot se cache maintenant [Attention]

#11 2015-12-12 20:32:39

Re : Googlebot se cache maintenant [Attention]

#12 2015-12-14 05:35:00

Re : Googlebot se cache maintenant [Attention]

Pied de page des forums