Vous n'êtes pas identifié(e).

  • Contributions :
  • Vos boîtes de messages privés sont vides.

#1 2017-09-06 08:45:00

Mention Dukofo
Soldier
Inscription : 2015-07-21
Messages : 1 177

Netlinking
Networking SEO

In Cloaking Veritas

Est ce que certains d'entre vous ont testé le système de htxps://www.in-cloaking-veritas.com/ ?

Il pourrait être intéressant de regrouper toutes les adresses IP des bots de Google, histoire d'avoir une liste une bonne fois pour toutes.


Intéressé par de l'article Sponso  -> Skype : seo.leadfr

Hors ligne

#2 2017-09-06 22:56:27

Mention Julien_G
Scout
Lieu : Lyon
Inscription : 2015-06-26
Messages : 569

Développement PHP
Sécurité
Automatisation Web
Social Engineering
Site Web

Re : In Cloaking Veritas

Hello,

Bon projet, je l'ai un peu adapté à mes besoins (je trouve ça chiant à installer SQL pour un petit cloaking).

Un truc à suivre/utiliser, c'est du gratuit open source par https://twitter.com/PatrickValibus


----------------------------------------------------------------

Skype : t3n0k_UG - Automatisation SEO et Hacking

Hors ligne

#3 2017-09-07 07:18:30

Mention Cyd
Scout
Lieu : Rennes
Inscription : 2013-01-18
Messages : 1 548

Audit et Analyse
Netlinking
Cloaking
Marketing

Re : In Cloaking Veritas

Sinon pour les IPs, tu as déjà une bonne base ici : http://www.lightonseo.com/moteurs-de-re … googlebot/

(bon le site est HS là tout de suite, mais @Bigorno va nous réparer ça).


Work Hard In Silence, Let Success Make The Noise !
--> cedricguerin.fr

En ligne

#4 2017-09-07 09:33:23

Mention Dukofo
Soldier
Inscription : 2015-07-21
Messages : 1 177

Netlinking
Networking SEO

Re : In Cloaking Veritas

Oui, je l'avais déjà vu cette liste.
Mais c'était justement pour compléter parce qu'a part le regex sur le 66.249 il y a pas bcp d'autres IP.

Dernière modification par Dukofo (2017-09-07 09:34:11)


Intéressé par de l'article Sponso  -> Skype : seo.leadfr

Hors ligne

#5 2017-09-08 07:31:44

Mention s2prod
Scout
Lieu : Grand Bay / Mauritius
Inscription : 2015-10-15
Messages : 205

intégration Html Css
Rédaction
Scraping
Social Engineering
Site Web

Re : In Cloaking Veritas

Le script proposé à par Walid en toute fin de cet article permet d'identifier GoogleBot de manière plus fiable (mais pas infaillible) en ne limitant pas uniquement à l'UA mais par un habile procédé de reverse dns par rapport à l'ip du "visiteur", un fois dns résolu, il vérifie si la nomenclature du dns correspond à un truc dans le genre crawl-66-249-66-1.googlebot.com ... Après si la condition est rempli on affiche "ça" sinon "l'autre ça"

Bref, c'est vraiment pas mal, car ça n'oblige pas à se tenir à jour sur les IP de GoogleBot. Je vais tester un .tld gratuit.


Soyez réalistes : Demandez l'impossible !
Ⓢ②ⓅⓇⓄⒹ

Hors ligne

#6 2017-09-08 10:49:36

Mention DevForEver
Recruit
Lieu : Alsace
Inscription : 2016-02-16
Messages : 73

PHP
JAVA
DB Admin
Sécurité

Re : In Cloaking Veritas

pour ceux que ca intéresse,
ci-joint un export de notre DB avec les champs IP, hostname et date de vérification ou le mot Google apparait dans le nom d'hote
hxxps://www.catupload.com/download/e609b3259692a969a59042621c954598.html

La liste est incomplète, y a un peu plus de 4000
Si j'ai 5 min, je compresse les données avec une annotation CIDR

Hors ligne

#7 2017-09-08 11:25:47

Mention Julien_G
Scout
Lieu : Lyon
Inscription : 2015-06-26
Messages : 569

Développement PHP
Sécurité
Automatisation Web
Social Engineering
Site Web

Re : In Cloaking Veritas

In cloaking veritas fait aussi un reverse DNS, il met juste en cache les IPs pour éviter de faire tout le temps des reverse dns (qui est couteux en temps de chargement)

Dernière modification par Julien_G (2017-09-08 11:25:57)


----------------------------------------------------------------

Skype : t3n0k_UG - Automatisation SEO et Hacking

Hors ligne

Pied de page des forums