Automatiser la recherche de sites

AlexB · #1 2016-07-06 13:05:39

Bonjour,

J'ai besoin d'automatiser mes recherches de sites, en France et à l'étranger.

En gros j'ai besoin d'un tool pour trouver des sites ayant certains footprints et certains KPIs.

Pour l'instant j'utilise Google à la main et Semrush mais j'atteins les limites.

Que me conseilleriez vous ? J'ai cru comprendre que GSA SER pourrait me rendre ce service. Zeno pourrait être une bonne alternative ? Vous me suggérez un autre tool ? seule la recherche est automatisée, je n'ai besoin que de récupérer des listes de listes, pas de les contacter en automatique.

Si GSA remplit ce rôle, je peux l'utiliser sur mon PC où l'utilisation d'un VPS semble plus appropriée?

Si besoin d'un VPS, ce type de config vous semble bien ? (trop, pas assez?)

Bronze VPS

CPU: up to 1500 MHz
RAM: up to 3072 MB
HDD: up to 220 GB
Traffic: without limitation
Windows: XP/7/8/2003/2008/2012
Linux/BSD: >20 variants
Servers are located in 20 countries.

$7/mo

Merci par avance pour vos lumières !

KrustyHack · #2 2016-07-06 13:10:50

Ay,

Déjà je te conseille un VPS et pas ta machine perso à la maison.

Après le VPS que tu me présentes là semble un peu léger (le CPU : 1.5Ghz Oo et même niveau RAM perso je ne propose que du 4Go de base minimum)
Ce qui est aussi très important c'est la BP. De combien est-elle ?

Mitsu · #3 2016-07-06 13:21:11

Après le gros soucis c'est qu'il te faudra masse proxy, parce que dès que tu utilise des commandes google tu te fais rapidement shooter.

AlexB · #4 2016-07-06 13:26:27

@KrustyHack

Merci pour ce retour.

La BP n'est pas indiquée dans l'offre, pour 7$/mo je suppose qu'elle n'est pas très large. A tester...

Le VPS est utile pour plus de production ?

AlexB · #5 2016-07-06 13:28:50

Mitsu a écrit :

Après le gros soucis c'est qu'il te faudra masse proxy, parce que dès que tu utilise des commandes google tu te fais rapidement shooter.

Tu me conseilles d'acheter des listes ou un tool pour trouver les bons proxys?

KrustyHack · #6 2016-07-06 13:43:36

Ay,

AlexB a écrit :

Le VPS est utile pour plus de production ?

J'ai pas compris ta question.

AlexB · #7 2016-07-06 13:52:23

KrustyHack a écrit :

Ay,
AlexB a écrit :
Le VPS est utile pour plus de production ?
J'ai pas compris ta question.

Le VPS permet d'avoir plus de ressources et donc d’exécuter le travail plus rapidement ? A-t-il un autre intérêt ?

xcepty · #8 2016-07-06 14:06:20

Oui, continuer de travailler tranquillement sans que tu fasses tourner une machine à la maison
Perso j'utilise serveur SoYouStart -> proxmox + ip failover (web server + proxy). Ca marche pas mal.

KrustyHack · #9 2016-07-06 14:10:02

Ay,

AlexB a écrit :

Le VPS permet d'avoir plus de ressources et donc d’exécuter le travail plus rapidement ? A-t-il un autre intérêt ?

De un le VPS te permet d'avoir des machines performantes (genre là je suis sur un 8 coeurs 32Go de RAM) ET un débit en conséquence (là je suis à ~900 Mb/s en down et 200 Mb/s en up.

De deux, un VPS ça se backup facilement avec les snapshot (par exemple) et il est possible de migrer les VMs de serveur à serveur. Donc pour le maintien c'est niquel.

Je tourne sous Proxmox avec 5 serveurs SYS et plusieurs VM réparties je n'ai jamais eu aucun problèmes.

Dernière modification par KrustyHack (2016-07-06 14:39:54)

AlexB · #10 2016-07-06 14:47:22

Merci pour vos réponses!

Vu que je ne vais pas pouvoir traiter plus que ce que le scrapper ne produit, dans un premier temps je vais utiliser ma machine dans ses temps de veille.

Comme scrapper vous me conseilleriez quoi ? Le plus complet et performant pour de la recherche de sites à votre avis ? Gscrapper ?

🟣 Automatiser la recherche de sites

#1 2016-07-06 13:05:39

Automatiser la recherche de sites

#2 2016-07-06 13:10:50

Re : Automatiser la recherche de sites

#3 2016-07-06 13:21:11

Re : Automatiser la recherche de sites

#4 2016-07-06 13:26:27

Re : Automatiser la recherche de sites

#5 2016-07-06 13:28:50

Re : Automatiser la recherche de sites

#6 2016-07-06 13:43:36

Re : Automatiser la recherche de sites

#7 2016-07-06 13:52:23

Re : Automatiser la recherche de sites

#8 2016-07-06 14:06:20

Re : Automatiser la recherche de sites

#9 2016-07-06 14:10:02

Re : Automatiser la recherche de sites

#10 2016-07-06 14:47:22

Re : Automatiser la recherche de sites

Pied de page des forums