optimisation email grabber

conquering_lion · #1 2015-06-22 21:54:34

hello

j'ai environ un million d'url .. et ca met déjà des plombes ne serait-ce que pour traiter un paquet de 40 000 ..

auriez-vous une astuce pour optimiser mon temps de traitement ?

durando · #2 2015-06-23 08:28:52

1ère question : tu passes par des proxies ?
2ème question : t'as déjà réussi à avoir des résultats probants avec ce plugin ? Moi pas. J'ai toujours un taux d'adresses obtenus très bas, sans compter les adresses génériques inexploitables.
3ème question : j'allais te proposer de prendre un abonnement emailhunter.co, mais vu le volume sur lequel tu bosses, même si tu prends l'abonnement maxi, ça le fera pas.

Désolé, je t'amène pas de solutions, là. :s

conquering_lion · #3 2015-06-23 17:46:15

oui j'utilise les proxies de scrapebox
je viens de jeter un oeil sur fichier de mails que j'ai réussi à avoir (batch de 40 000, arrêté au 3/4)

c'est vrai que parfois le scrap est assez mauvais, style regex foireux + les adresses bidons évidement (name@domain.com)

bah je sens que je vais finir par réutiliser un bout de code ruby

🟣 optimisation email grabber

#1 2015-06-22 21:54:34

optimisation email grabber

#2 2015-06-23 08:28:52

Re : optimisation email grabber

#3 2015-06-23 17:46:15

Re : optimisation email grabber

Pied de page des forums