Rejoignez Net Labs sur Discord

Scraper pixabay

#1 2019-04-09 20:07:59 · scraper, pixabay, partager

Mention florent42
🥉 Scout10 ansPilier IIIPremier secours IIAccueillant
Lieu : Sainté mon b'let !
Messages : 119
Likes : 9

Scraper pixabay

Salut à tous,


Lors du NLEvent, j'ai eu l'occasion de parler à Stéphane Madaleno qui m'a très gentiment filé un coup de patte concernant une fonction de Zenno que j'utilisais mal et du coup j'ai recommencé à faire des templates, j'en profite donc pour vous en partager un.

En voici un tout simple mais qui dépannera bien, il s'agit d'un scraper d'images sur pixabay à partir d'un KW :

[url]https://www.petit-fichier.fr/2019/04/09/pixabay---scripts-seo/[/url]

Il y avait sans doute plus rapide ou plus simple, donc si vous pensez pouvoir l'améliorer, n'hésitez pas à le faire et partager.


Florent

0
J'aime ❤️

🔴 Hors ligne

10 référents en Automatisation répondent dans cet espaceInscription gratuite : présentez-vous, puis posez vos questions et répondez aux discussions.

#2 2019-04-11 13:19:54

Mention oyonyx
🥉 ScoutAccueillant VIPilier V7 ansClinicien IVPremier secours IVStratège IIBusiness man IIPolyvalent
Lieu : Nord, France
Messages : 806
Likes : 7
Audit et analyse ✓ Netlinking ✓ Stratégie marketing Publicité (SEA et Ads)

Re : Scraper pixabay

bonjour Florent
merci pour le partage, je suis en train de tester ça :)

0
J'aime ❤️

🔴 Hors ligne

#3 2019-04-11 14:28:55

Mention BeginRank
🥉 Scout7 ansPilier IIIAccueillant IVPolyvalentClinicienPremier secours IIStratègeAutomate
Lieu : Lille
Messages : 135
Likes : 0
Netlinking Contenu assisté par IA

Re : Scraper pixabay

Merci bien pour le partage !


Pas besoin de salaire pour connaître sa valeur.

0
J'aime ❤️

🔴 Hors ligne

#4 2019-04-12 09:49:27

Mention oyonyx
🥉 ScoutAccueillant VIPilier V7 ansClinicien IVPremier secours IVStratège IIBusiness man IIPolyvalent
Lieu : Nord, France
Messages : 806
Likes : 7
Audit et analyse ✓ Netlinking ✓ Stratégie marketing Publicité (SEA et Ads)

Re : Scraper pixabay

Petit feedback au bout d'un moment il y a un captcha qui bloque
sinon ça marche très bien !

0
J'aime ❤️

🔴 Hors ligne

#5 2019-04-12 11:24:35

Mention chn16000
🥉 ScoutAccueillant VIPilier VIPremier secours VIForce polyvalente7 ansReconnuPhilanthrope IIIClinicien IVExpert Outils et technique IIIExpert SEO IIStratègeBusiness manAutomate
Messages : 1 913
Likes : 165
Stratégie marketing Audit et analyse ✓ Automatisation ✓

Re : Scraper pixabay

oyonyx a écrit :

Petit feedback au bout d'un moment il y a un captcha qui bloque

Capmonster ou alors rallonger la pause entre 2 scraps.


Soyez vous-même, les autres sont déjà pris

0
J'aime ❤️

🔴 Hors ligne

#6 2019-04-12 12:59:33

Mention florent42
🥉 Scout10 ansPilier IIIPremier secours IIAccueillant
Lieu : Sainté mon b'let !
Messages : 119
Likes : 9

Re : Scraper pixabay

oyonyx a écrit :

Petit feedback au bout d'un moment il y a un captcha qui bloque
sinon ça marche très bien !

J'avais déjà mis un temps de pause que je trouvais sacrément long, donc la solution de fainéant que je te conseille est d'augmenter le temps de pause présent. Sinon, il faudra modifier le template pour traiter le captcha, mais ça implique plus de taf qu'une simple augmentation du temps de pause. :P

0
J'aime ❤️

🔴 Hors ligne

#7 2019-04-12 16:04:26 · api, pixabay

Mention karni
🥉 Scout12 ansForce polyvalentePilier IVAccueillant IIIAutomate IIClinicienPremier secours IIStratègeBusiness man
Lieu : Angers
Messages : 253
Likes : 3
Stratégie marketing Automatisation ✓ Scraping et extraction ✓ Netlinking

Re : Scraper pixabay

florent42 a écrit :
oyonyx a écrit :

Petit feedback au bout d'un moment il y a un captcha qui bloque
sinon ça marche très bien !

J'avais déjà mis un temps de pause que je trouvais sacrément long, donc la solution de fainéant que je te conseille est d'augmenter le temps de pause présent. Sinon, il faudra modifier le template pour traiter le captcha, mais ça implique plus de taf qu'une simple augmentation du temps de pause. :P


Déjà merci pour ton share , c'est sympa.

Vous pouvez aussi essayer de passer  par l'API gratuite de Pixabay , vous n'aurez plus de captchas et ça sera beaucoup plus scalable.

Il faut creer un compte chez Pixabay et recuperer l'API key.

Ensuite vous faites un bloc "get" avec cette url et vous gerez les parametres de l'url comme bon vous semble :

hxxps://pixabay.com/api/docs/


Exemple :

https://pixabay.com/api/?key={-Variable.api_key-}&q={-Variable.search_query_encoded-}&per_page=200&page={-Variable.page_number-}&image_type={-Variable.image_type-}&lang={-Variable.lang-}&orientation={-Variable.orientation-}&category={-Variable.category-}&min_width={-Variable.min_width-}&min_height={-Variable.min_height-}&colors={-Variable.colors-}&editors_choice={-Variable.editors_choice-}&safesearch={-Variable.safesearch-}&order={-Variable.order-}

Ensuite parsing du JSON et JSON to table

Ensuite vous downloadez les images de la liste avec une autre brique "get"

Dernière modification par karni (2019-04-12 16:05:54)


Formation Zennoposter High Level  ▶ Skype : karnivore4949

Pas encore sur Zenno ?    ▶ Rejoindre la communauté du meilleur tool d'automatisation  =)

0
J'aime ❤️

🔴 Hors ligne

#8 2019-04-12 18:19:17

Mention chn16000
🥉 ScoutAccueillant VIPilier VIPremier secours VIForce polyvalente7 ansReconnuPhilanthrope IIIClinicien IVExpert Outils et technique IIIExpert SEO IIStratègeBusiness manAutomate
Messages : 1 913
Likes : 165
Stratégie marketing Audit et analyse ✓ Automatisation ✓

Re : Scraper pixabay

Trop fort Karni.  +100


Soyez vous-même, les autres sont déjà pris

0
J'aime ❤️

🔴 Hors ligne

#9 2019-04-19 13:43:04

Mention oyonyx
🥉 ScoutAccueillant VIPilier V7 ansClinicien IVPremier secours IVStratège IIBusiness man IIPolyvalent
Lieu : Nord, France
Messages : 806
Likes : 7
Audit et analyse ✓ Netlinking ✓ Stratégie marketing Publicité (SEA et Ads)

Re : Scraper pixabay

florent42 a écrit :
oyonyx a écrit :

Petit feedback au bout d'un moment il y a un captcha qui bloque
sinon ça marche très bien !

J'avais déjà mis un temps de pause que je trouvais sacrément long, donc la solution de fainéant que je te conseille est d'augmenter le temps de pause présent. Sinon, il faudra modifier le template pour traiter le captcha, mais ça implique plus de taf qu'une simple augmentation du temps de pause. :P

Oui c'est surement de ma faute, j'ai modifié le temps de pause :D

0
J'aime ❤️

🔴 Hors ligne

#10 2019-04-19 13:43:54

Mention oyonyx
🥉 ScoutAccueillant VIPilier V7 ansClinicien IVPremier secours IVStratège IIBusiness man IIPolyvalent
Lieu : Nord, France
Messages : 806
Likes : 7
Audit et analyse ✓ Netlinking ✓ Stratégie marketing Publicité (SEA et Ads)

Re : Scraper pixabay

karni a écrit :

Vous pouvez aussi essayer de passer  par l'API gratuite de Pixabay , vous n'aurez plus de captchas et ça sera beaucoup plus scalable.

bonne idée ! faudra que je me penche là-dessus

0
J'aime ❤️

🔴 Hors ligne

#11 2019-04-21 15:27:40

Mention Seoxis
🥇 Guardian12 ansPilier VClinicien IIIPremier secours IVAccueillant IIIExpert Outils et technique IIIStratège IIAutomate IIPolyvalentEstiméExpert IA et GEO II
Lieu : Calais
Messages : 801
Likes : 97
Scraping et extraction ✓ Netlinking ✓ Audit et analyse ✓ Automatisation ✓
Site Web

Re : Scraper pixabay

ou utiliser les proxys public ils ne seront pas ban sur pixa :P

Dernière modification par Seoxis (2019-04-21 15:27:50)


Envie de me faire plaisir , achetez les mêmes proxys que j'utilise via ce lien : -=[ buyproxies.org ]=-  (15€ pour 10 proxys dédiés)

Envie de tester ZennoPoster c'est par ici : -=[ ZennoPoster ]=- (à partir de 87$)

0
J'aime ❤️

🔴 Hors ligne

Accueil › Bots et automatisation › Scraper pixabay

Haut

Pied de page des forums