[Liste des bots d'exploration] à bloquer

Jaffaar · #21 2016-02-13 17:58:14

Makmanuss · #22 2016-02-17 17:21:00

durando a écrit :

Ca, c'est top, merci. Lequel correspond à Backlinkwatch ?

@durando Je crois qu'il ne possède pas leur propre crawler selon cette source : hxxp://linksphinx.com/backlink-checker-tools/#backlinkwatch. Donc il doit réutiliser l'un de la liste.

D'ailleurs peut être que cette liste peut venir enrichir celle de @ShutteR mais je n'y crois pas trop (voir pas du tout... ). Au passage merci pour cette liste

@Dukofo @Alcor merci également pour vos partages !

Dernière modification par Makmanuss (2016-02-17 17:22:28)

Jerems · #23 2016-02-18 10:13:33

Deja merci pour le partage

Question : Quand tu bloques ces bots, à part par la search console comment on repère des blast qu'un concurrent peut te faire sur ton MS ou un autre de tes sites ?

Jaffaar · #24 2016-02-18 10:28:00

Jerems a écrit :

Deja merci pour le partage
Question : Quand tu bloques ces bots, à part par la search console comment on repère des blast qu'un concurrent peut te faire sur ton MS ou un autre de tes sites ?

il faut en choisir un que tu ne bloque pas, qui te sert de backdoor

Jerems · #25 2016-02-18 10:29:42

Merci de ta réponse @Jaffaar

Makmanuss · #26 2016-02-18 12:49:40

@Jerems dans la logique, je pense que tu peux que par la GSC ou bien creer des Google alertes pour les voir arriver en temps réel (par rapport à ce que GG découvre) ?

Dernière modification par Makmanuss (2016-02-18 12:51:37)

Jerems · #27 2016-02-18 13:09:48

Merci de ta réponse @Makmanuss mais si ils sont deja dans la search consol c'est que Google les a deja pris en compte. En fait j'aurais aimé pouvoir repérer le blast avant GG.

Je vais faire un test de mon coté pour voir ce que ça donne

Makmanuss · #28 2016-02-18 13:15:00

@Jerems Oui effectivement ça revient au même.. Si quelqu'un à une solution ou une piste. Elle est la bienvenue !

Jerems · #29 2016-02-18 14:16:58

Jaffaar avait répondu

il faut en choisir un que tu ne bloque pas, qui te sert de backdoor

Makmanuss · #30 2016-02-18 14:36:38

@Jerems @Jaffaar Ah oui, j'avais pas vu ! Merci pour la réponse

durando · #31 2016-02-19 09:03:35

En complément, on peut via htaccess bloquer la liste de user-agents présente ici : hxxps://perishablepress.com/6g/.
Ca donne :

<IfModule mod_setenvif.c>

  SetEnvIfNoCase User-Agent ([a-z0-9]{2000}) bad_bot

  SetEnvIfNoCase User-Agent (archive.org|binlar|casper|checkpriv|choppy|clshttp|cmsworld|diavol|dotbot|extract|feedfinder|flicky|g00g1e|harvest|heritrix|httrack|kmccrew|loader|miner|nikto|nutch|planetwork|postrank|purebot|pycurl|python|seekerspider|siclab|skygrid|sqlmap|sucker|turnit|vikspider|winhttp|xxxyy|youda|zmeu|zune) bad_bot

  <limit GET POST PUT>

    Order Allow,Deny

    Allow from All

    Deny from env=bad_bot

  </limit>

</IfModule>

Je vous conseille d'ailleurs d'utiliser tout ou partie du htaccess qu'il fournit si vous êtes sous Apache ; ça vient du type qui a conçu le plugin BBQ pour Wordpress, donc on peut considérer qu'il sait de quoi il parle en matière de sécu.

Theopat · #32 2016-02-22 19:23:23

Si tu cache tes BL de tes satellites ou 301, vers le money site, tu as car même la donne TF majestic, Ahrefs de tes Sat !
Donc tu sais plus ou moins ce que tu envois vers le MS.

J3R · #33 2016-02-22 21:05:47

Merci pour le partage et les explications qui vont avec!

Theopat · #34 2016-02-22 21:12:44

Dukofo a écrit :

theopat a écrit :
Si tu cache tes BL de tes satellites ou 301, vers le money site, tu as car même la donne TF majestic, Ahrefs de tes Sat !
Donc tu sais plus ou moins ce que tu envois vers le MS.
Donc, si j'ai bien compris, tu empêches tous les bots sur ton MS et sur tes satellites ?
Et tu te fie au TF de tes satellites, pour savoir a peu près ce que cela envoi ?

oui tu bloques au niveau de tes sat ou 301 et tu te fie aux résultats TF et Ahrefs de eux pour voir ce que tu envois et le pourcentage des ancres opti ou pas.

Ryan · #35 2016-02-23 23:27:26

@Jerems tu bloques pas sur ton MS mais sur tes Sats qui font des liens à ton MS

Jerems · #36 2016-02-24 08:03:54

Merci pour la réponse @Ryan

🟣 [Liste des bots d'exploration] à bloquer

#21 2016-02-13 17:58:14

Re : [Liste des bots d'exploration] à bloquer

#22 2016-02-17 17:21:00

Re : [Liste des bots d'exploration] à bloquer

#23 2016-02-18 10:13:33

Re : [Liste des bots d'exploration] à bloquer

#24 2016-02-18 10:28:00

Re : [Liste des bots d'exploration] à bloquer

#25 2016-02-18 10:29:42

Re : [Liste des bots d'exploration] à bloquer

#26 2016-02-18 12:49:40

Re : [Liste des bots d'exploration] à bloquer

#27 2016-02-18 13:09:48

Re : [Liste des bots d'exploration] à bloquer

#28 2016-02-18 13:15:00

Re : [Liste des bots d'exploration] à bloquer

#29 2016-02-18 14:16:58

Re : [Liste des bots d'exploration] à bloquer

#30 2016-02-18 14:36:38

Re : [Liste des bots d'exploration] à bloquer

#31 2016-02-19 09:03:35

Re : [Liste des bots d'exploration] à bloquer

#32 2016-02-22 19:23:23

Re : [Liste des bots d'exploration] à bloquer

#33 2016-02-22 21:05:47

Re : [Liste des bots d'exploration] à bloquer

#34 2016-02-22 21:12:44

Re : [Liste des bots d'exploration] à bloquer

#35 2016-02-23 23:27:26

Re : [Liste des bots d'exploration] à bloquer

#36 2016-02-24 08:03:54

Re : [Liste des bots d'exploration] à bloquer

Pied de page des forums