SemSpider : chaque page passée au crible

Listes de fichiers (logiciels/mp3/ebooks/divx).

#1 contenu, logiciels, scraper

T
taldtRecruit
16 messages0 j'aimedepuis 2013
Distinctions · 3
12 ansPilierAccueillant

Listes de fichiers (logiciels/mp3/ebooks/divx).

Bonjour,

Je ne sais pas si je pose la question dans le bon topic.

Pour un projet j'ai besoin de beaucoup de contenu, qui serait des listes :
- d'albums ou de mp3 individuels
- de logiciels
- de vidéos (films, series, docus ou autre)
- d'ebooks
- d'applications ios ou android

Je n'ai pas besoin de description ou image, juste les noms, voire éventuellement les versions pour les logiciels ou l'année de sortie.

Le maximum de contenu sera le mieux; je prends la langue anglaise, française, voire autre (espagnol/allemand).
Comment m'y prendre? Scraper du contenu, si oui ou et comment? Ou récupérer des listes déjà faites mais ou?

A noter que je possède scrapebox mais je ne sais pas s'il peut m'aider dans ce cas.

Merci d'avance pour vos avis,

T

J'aime ❤️

Hors ligne

15 référents en Scraping et extraction répondent dans cet espaceInscription gratuite : présentez-vous, puis posez vos questions et répondez aux discussions.

#2 scripts, php

JaffaarGuardian
8 812 messages1 478 j'aimedepuis 2012Consultant SEO / WEB / IA
Site Web
Distinctions · 22
Pilier VIIIPhilanthrope VIIPremier secours VIIAccueillant VI12 ansAdministrateurKilluavieConsommateur de liensÉminentClinicien VExpert SEO VForce polyvalenteExpert IA et GEO IVExpert Outils et technique IIIStratège IIAutomate IISérie IIRéactions IIExpert Multi-canalExpert BusinessIngénieur webBusiness man

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

Si c'est trop spécifique il faudra faire des scripts php ou py , scrapy en py peu t'aider :)


⌁ NET-LABS — SEO INTELLIGENCE.
    Discord • SemSeeker • SemSpider

J'aime ❤️

Hors ligne

#3 google

AutomateScout
313 messages0 j'aimedepuis 2014
Distinctions · 5
Accueillant VI12 ansPilier IVClinicien IIPremier secours II

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

A une époque j'utilisais des requetes google un peu complexe pour trouver de la musique rapidement :

hxxp://www.google.com/search?hl=en&lr=&safe=off&q=-inurl%3A(htm%7Chtml%7Cphp)+intitle%3A"index+of"+%2B"last+modified"+%2B"parent+directory"+%2Bdescription+%2Bsize++%2Bmp3+%2B"marley"%7D&btnG=Search

En gros là, tu vas touver un multitude de fichier mp3 en "clic droit télécharger la source" de Marley. Assez puissant, tu couples ça à une boucle wget, tu boucles sur tes extensions, ça devrait vite tomber dans la musette :)

J'aime ❤️

Hors ligne

#4 index, google

SeoxisGuardian
806 messages104 j'aimedepuis 2014Calais
Site Web
Distinctions · 13
12 ansPilier VReconnuClinicien IIIPremier secours IVAccueillant IIIExpert Outils et technique IVStratège IIAutomate IIPolyvalentSérieRéactionsExpert IA et GEO II

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

Automate a écrit :

A une époque j'utilisais des requetes google un peu complexe

Perso je l'utilise encore , la requête est vraiment énorme

tape sur google : intitle:"index of" Ton-Mot-Clé et enjoy !

malheureusement certains sites exploitent cette astuce pour acquérir des visiteurs en créant un site avec index of en url / title m'enfin à force tu sauras les repérer

J'aime ❤️

Hors ligne

#5 contenus, scraper

T
taldtRecruitAuteur
16 messages0 j'aimedepuis 2013
Distinctions · 3
12 ansPilierAccueillant

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

Merci :)

J'avoue que c'est comme ça que je téléchargeais mes premiers mp3 au début des années 2000 c'était la fête il y en avais partout :)

Mon souci est que je suis un peu limité techniquement (pas codeur) donc la solution doit être la plus simple possible;
Je pensais essayer de trouver des sites pour lesquels les noms de l'album/MP3/ebook/divx etc listés sont contenus dans l'URL (par exemple sur un site de recensement de streaming/DL), scraper le site avec scrapebox et supprimer la première partie de l'URL sous Excel par contre je sèche un peu sur comment trouver ces sources,
T

J'aime ❤️

Hors ligne

#6

Exa634Scout
206 messages2 j'aimedepuis 2014Localhost
Distinctions · 4
12 ansPilier IIIAccueillant IVPremier secours II

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

Ca me fait penser à ça : http://www.keewa.net/ ;)


Quoi ? Ma conscience comme seule médaille,
Je traque et j'étripe sans remords tous les chevaliers Jedi.

J'aime ❤️

Hors ligne

#7

J
Jojo_le_haricotScout
461 messages2 j'aimedepuis 2014
Distinctions · 5
12 ansAccueillant VPilier IVClinicien IVPremier secours IV

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

Sympa le index of, merci


----
Chili con seo

J'aime ❤️

Hors ligne

#8

AutomateScout
313 messages0 j'aimedepuis 2014
Distinctions · 5
Accueillant VI12 ansPilier IVClinicien IIPremier secours II

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

intitle:"index of" high pr pdf

:lol:

Dernière modification par Automate (2014-05-05 22:04:14)

J'aime ❤️

Hors ligne

#9

SeoxisGuardian
806 messages104 j'aimedepuis 2014Calais
Site Web
Distinctions · 13
12 ansPilier VReconnuClinicien IIIPremier secours IVAccueillant IIIExpert Outils et technique IVStratège IIAutomate IIPolyvalentSérieRéactionsExpert IA et GEO II

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

+1 j'approuve........ tiens approuve et si .... "intitle:"index of" auto approve"

J'aime ❤️

Hors ligne

#10 google, mots-clés

T
taldtRecruitAuteur
16 messages0 j'aimedepuis 2013
Distinctions · 3
12 ansPilierAccueillant

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

merci grâce aux opérateurs j'ai trouvé ce qu'il me fallait : en gros dans google "site:isohunt.to inurl:torrent_details".
Plus qu'à faire tourner scrapebox avec quelques mots-clés, dans Excel je ne conserve que la partie de droite de l'URL après le dernier / et tout roule :)

J'aime ❤️

Hors ligne

#11 index

cb_nalexScout
784 messages2 j'aimedepuis 2014
Distinctions · 8
12 ansPilier VClinicien IVPremier secours IVAccueillant IVStratège IIPolyvalentIngénieur web

Re : Listes de fichiers (logiciels/mp3/ebooks/divx).

Je réponds très tard à ce post mais perso moi j'utilise ca :
intitle:index.of”last modified”parent directory”(mkv|avi)"MOT CLE DE RECHERCHE"-htm-html-php-asp

tu fais varier mkv ou avi par exemple en mp3 ou wav


°¨¨°³º¤£ [  COOLBYTES  ] £¤º³°¨¨° - Skype: cb_nalex_levrai

J'aime ❤️

Hors ligne

Accueil › Scraping et données › Listes de fichiers (logiciels/mp3/ebooks/divx).

Haut

Pied de page des forums