SemSpider : chaque page passée au crible

Trouver toutes les pages non indéxées d'un gros site

#1 indexer, indéxées, contenus, google

wollastoniScout
1 155 messages589 j'aimedepuis 2019BZH
Distinctions · 16
Consommateur de liensInfluentPilier VIPremier secours VAccueillant VPhilanthrope IIIClinicien IVExpert SEO IVExpert Business IIIExpert Outils et technique IIIStratège IIPolyvalent5 ansExpert IA et GEO IIExpert Multi-canalBusiness man

Trouver toutes les pages non indéxées d'un gros site

J'ai un gros site avec plus de 10.000 urls.

Je me rends compte que certaines pages viennent de s'indexer (suite à une amélioration de la technique du site l'an passé) et qu'elles font environ 300 visites par mois.

J'imagine qu'il reste sûrement des pages non indéxées à potentiel qu'il suffirait de pousser dans la GSC ou légèrement optimiser les contenus pour les indéxer.

Mon souci : comment les repérer sur un site à 10.000 url ?

Y a-t-il un tool magique qui crawle le site + google et qui nous sortirait la liste des urls non indéxés ?
Si oui, je suis preneur.

PS : elles ne sont pas dans les pages "Explorées/Détectées non indéxées" de la GSC.

Merci à tous


Investisseur digital

J'aime ❤️

Hors ligne

23 référents en SEO technique répondent dans cet espaceInscription gratuite : présentez-vous, puis posez vos questions et répondez aux discussions.

#2

JaffaarGuardian
8 757 messages1 442 j'aimedepuis 2012Consultant SEO / WEB / IA
Site Web
Distinctions · 22
Pilier VIIIPhilanthrope VIIPremier secours VIIAccueillant VI12 ansAdministrateurKilluavieConsommateur de liensÉminentClinicien VExpert SEO VForce polyvalenteExpert IA et GEO IVExpert Outils et technique IIIStratège IIAutomate IISérie IIRéactions IIExpert Multi-canalExpert BusinessIngénieur webBusiness man

Re : Trouver toutes les pages non indéxées d'un gros site

@wollastoni :scrapebox, screaming F, code phpil faut juste crawler ton site :)


⌁ NET-LABS — SEO INTELLIGENCE.
    Discord • SemSeeker • SemSpider

J'aime ❤️

Hors ligne

#3 google, sitemap, index, indexées, api

NicolasWebScout
1 114 messages214 j'aimedepuis 2015Besançon (France)
Site Web
Distinctions · 11
Pilier VIPremier secours V10 ansReconnuClinicien IIIAccueillant IIIExpert SEO IVStratège IIPhilanthropeExpert IA et GEO IIExpert Outils et technique

Re : Trouver toutes les pages non indéxées d'un gros site

Déjà, il faut trouver toutes les urls de ton site.
Logiquement c'est simple, elles sont dans un sitemap.

Le plus difficile sera de confronter cela à l'index de Google pour voir lesquels sont dedans.
Il y a différentes approches possible.

1) Utiliser Google Search console et faire confiance à cet outil :D
On peut exporter les pages indexées depuis l'outil. On peut aussi interroger avec l'API pour voir si les pages sont dessus : https://developers.google.com/webmaster-tools?hl=fr

2) utiliser tout un tas d'outils à coder ou à utiliser pour vérifier une par une si tes pages sont indexées sur google directement en faisant une recherche sur la page.
Tu as Selenium qui fait ça si tu sais coder, mais il va falloir des IP, des proxys, etc.
https://www.selenium.dev/ : pour automatiser des choses sur un browser

J'aime ❤️

Hors ligne

#4

wollastoniScoutAuteur
1 155 messages589 j'aimedepuis 2019BZH
Distinctions · 16
Consommateur de liensInfluentPilier VIPremier secours VAccueillant VPhilanthrope IIIClinicien IVExpert SEO IVExpert Business IIIExpert Outils et technique IIIStratège IIPolyvalent5 ansExpert IA et GEO IIExpert Multi-canalBusiness man

Re : Trouver toutes les pages non indéxées d'un gros site

Merci les gars.

Jaffaar, je viens d'acheter Scrapebox.
Je t'enverrai ptet une petite question par MP si je ne trouve pas comment faire avec.


Investisseur digital

J'aime ❤️

Hors ligne

#5

D
DocteurFerrariSEOScout
214 messages105 j'aimedepuis 2023
Distinctions · 9
ReconnuPilier IIIPremier secours III3 ansClinicien IIAccueillantExpert IA et GEO IIExpert SEO IIExpert Outils et technique

Re : Trouver toutes les pages non indéxées d'un gros site

Sinon t'avais simplement l'option de prendre 50€ de https://www.isindexed.com.

D'exporter toutes les urls de ton site puis de les lui rentrer.

J'aime ❤️

Hors ligne

Accueil › SEO technique › Trouver toutes les pages non indéxées d'un gros site

Haut

Pied de page des forums