SecHunter : vos failles, avant les attaquants

Scrapper google !

#1 google, domaine, agent, captcha, requête

C
content spinnerVagabond

Scrapper google !

Bonjour tout le monde,

Je suis en train de développer un rankchecker qui est sensé sortir la position d'un domaine sur un mot clé donné.
Mais très vite je me heurte au captcha de Google.
J'ai opéré quelque petits "tricks" pour rendre moins flagrant le scrap comme un rotation de l'user agent entre chaque requête, un temps d'attente entre chaque requête, ou bien supprimer les cookie en provenance de Google.
Mais Google est trop fort :P


Je voulais savoir comment bypass un maximum le mécanisme de détection de Google
Et au cas où on se fait griller, si c'est "rentable" d'acheter une solution pour casser le captcha

J'aime ❤️
15 référents en Scraping et extraction répondent dans cet espaceInscription gratuite : présentez-vous, puis posez vos questions et répondez aux discussions.

#2 proxies, agent

J
John DoeScout
140 messages2 j'aimedepuis 2015
Distinctions · 5
10 ansPilier IIIClinicienPremier secours IIAccueillant II

Re : Scrapper google !

Tu n'as pas précisé si tu utilisais des proxies ou pas.
Sans proxies tu n'iras pas loin et ça ne sert à rien de changer d'user agent entre chaque requête.

J'aime ❤️

Hors ligne

#3

JaffaarGuardian
8 812 messages1 478 j'aimedepuis 2012Consultant SEO / WEB / IA
Site Web
Distinctions · 22
Pilier VIIIPhilanthrope VIIPremier secours VIIAccueillant VI12 ansAdministrateurKilluavieConsommateur de liensÉminentClinicien VExpert SEO VForce polyvalenteExpert IA et GEO IVExpert Outils et technique IIIStratège IIAutomate IISérie IIRéactions IIExpert Multi-canalExpert BusinessIngénieur webBusiness man

Re : Scrapper google !

Commences par te présenter s'il te plait :
=> http://www.scripts-seo.com/forum-6-0-pr … age-1.html


⌁ NET-LABS — SEO INTELLIGENCE.
    Discord • SemSeeker • SemSpider

J'aime ❤️

En ligne

#4

nod_Scout
604 messages80 j'aimedepuis 2015Bordeaux
Site Web
Distinctions · 13
Consommateur de liensPilier VAccueillant V10 ansClinicien IIIPremier secours IVStratège IIIngénieur web IIPolyvalentEstiméPhilanthrope IIExpert SEOExpert Business

Re : Scrapper google !

John Doe a écrit :

Tu n'as pas précisé si tu utilisais des proxies ou pas.
Sans proxies tu n'iras pas loin et ça ne sert à rien de changer d'user agent entre chaque requête.

+1 , il te faut des proxies ;)

10 à 15 $ /mois pour 10 proxies privés, à la louche .


==> Besoin d'une presta netlinking ? DM <==

J'aime ❤️

Hors ligne

Accueil › Scraping et données › Scrapper google !

Haut

Pied de page des forums