Vous n'êtes pas identifié(e).

  • Contributions :
  • Vos boîtes de messages privés sont vides.

🟣 Astuces fonctions Zenno


#1 2016-09-06 14:06:08

Mention X3SED
🥉 Grade : Scout

AuxiliaireStratège10likesMembre Hospitalier
Inscription : 2015-05-13
Messages : 896
Likes : 13

Netlinking
Scraping
Automatisation Web
Comunity Management
Site Web

Re : Astuces fonctions Zenno

Alors je ne sais pas s'il y a un meilleur moyen pour faire ceci mais tu peux toujours regex (en text processing) pour ne faire ressortir que la version root et par la suite supprimer les duplicates ? Si tu veux garder l'url en entier, ça sera un grain plus compliqué mais rien de méchant.


_________
.

0
J'aime ❤️

🔴 Hors ligne

#2 2016-09-06 14:09:40

Mention karni
🥉 Grade : Scout

AuxiliaireStratège
Lieu : Angers
Inscription : 2013-04-07
Messages : 253
Likes : 3

Marketing
Automatisation Web
Scraping
Netlinking Auto

Re : Astuces fonctions Zenno

Dukofo a écrit :

# Comment nettoyer une liste d'URLS ?

J'ai une liste scrappé qui contient par exemple :
http://www.nomdedomaine1.com/article1
http://www.nomdedomaine1.com/article2
http://www.nomdedomaine1.com/article3
http://www.nomdedomaine2.com/article1
....

Je souhaiterais donc traiter cette liste avec Zenno afin de ne garder qu'un seul élement par nom de domaine. J'ai déjà dans un premier temps supprimé les duplicates, mais je vois pas comment traité la suite.

Hello,

Si tu souhaites par exemple garder uniquement le NDD (sans doublon)  après avoir scrappé des urls tu peux faire ça :

list processing -merge list (fusion de la liste dans une variable) ->text processing-replace (avec regex cf photo ci dessous, vous m’excuserez pour la qualité de la regex ^^) ->list processing add text (dans une nouvelle liste) ->list processing -remove duplicates (sur la nouvelle liste).

extraire_domaines_sans_doublon_depuis_urls.jpg


Formation Zennoposter High Level  ▶ Skype : karnivore4949

Pas encore sur Zenno ?    ▶ Rejoindre la communauté du meilleur tool d'automatisation  smile

0
J'aime ❤️

🔴 Hors ligne

#3 2016-09-06 14:55:30

Mention Julien_G
🥈 Grade : Soldier

Membre du CercleOfficierForce PolyvalenteIngénieur web
Lieu : Lyon
Inscription : 2015-06-26
Messages : 589
Likes : 2

Développement PHP
Sécurité
Automatisation Web
Social Engineering
Site Web

Re : Astuces fonctions Zenno

Alors tu vas devoir faire ça avec 3 lists voilà un schéma :
fe2fadcfa8d994a9d750b12b29b4abe9.png

ton résultat est dans list urls

Dernière modification par Julien_G (2016-09-06 14:56:25)

0
J'aime ❤️

🔴 Hors ligne

#4 2016-09-06 15:28:08

Mention karni
🥉 Grade : Scout

AuxiliaireStratège
Lieu : Angers
Inscription : 2013-04-07
Messages : 253
Likes : 3

Marketing
Automatisation Web
Scraping
Netlinking Auto

Re : Astuces fonctions Zenno

Merci @karni, je viens de l'essayer mais malheureusement, c'est pas exactement ce que je voulais faire.

Ok je pensais que tu voulais garder le domaine.

Dans ce cas tu peux aussi faire un truc comme ça :

zenno_1url_per_domain.jpg


Formation Zennoposter High Level  ▶ Skype : karnivore4949

Pas encore sur Zenno ?    ▶ Rejoindre la communauté du meilleur tool d'automatisation  smile

0
J'aime ❤️

🔴 Hors ligne

#5 2016-09-11 21:36:14

Mention Seoxis
🥇 Grade : Guardian

Membre du Black LaboMembre du CercleOfficierStratège50likes
Lieu : Calais
Inscription : 2014-04-29
Messages : 794
Likes : 88

Scraping
Netlinking Auto
Audit et Analyse
Automatisation Web
Site Web

Re : Astuces fonctions Zenno

Salut

Perso j'aurai fait plus court

tu classes ta liste par ordre alphabétique et tu fais une boucle :

si ligne 2 contient le même domaine que ligne 1 alors on supprime ligne 2 sinon on fait un +1 aux variables pour tester les lignes suivantes jusqu'a temps que ligne +1 est supérieur au nombre de ligne total de ta liste smile

Enjoy !


Envie de me faire plaisir , achetez les mêmes proxys que j'utilise via ce lien : -=[ buyproxies.org ]=-  (15€ pour 10 proxys dédiés)

Envie de tester ZennoPoster c'est par ici : -=[ ZennoPoster ]=- (à partir de 87$)

0
J'aime ❤️

🔴 Hors ligne

#6 2016-09-11 21:38:07

Mention Seoxis
🥇 Grade : Guardian

Membre du Black LaboMembre du CercleOfficierStratège50likes
Lieu : Calais
Inscription : 2014-04-29
Messages : 794
Likes : 88

Scraping
Netlinking Auto
Audit et Analyse
Automatisation Web
Site Web

Re : Astuces fonctions Zenno

Toujours faire au plus court car sur des gros projets le simple gain X 100 threads peut donner un X10 en vitesse d'exécution lol


Envie de me faire plaisir , achetez les mêmes proxys que j'utilise via ce lien : -=[ buyproxies.org ]=-  (15€ pour 10 proxys dédiés)

Envie de tester ZennoPoster c'est par ici : -=[ ZennoPoster ]=- (à partir de 87$)

0
J'aime ❤️

🔴 Hors ligne

#7 2016-09-12 12:00:13

Mention karni
🥉 Grade : Scout

AuxiliaireStratège
Lieu : Angers
Inscription : 2013-04-07
Messages : 253
Likes : 3

Marketing
Automatisation Web
Scraping
Netlinking Auto

Re : Astuces fonctions Zenno

@Seoxis, je suis ok avec toi sur le principe de réduire au maximum les étapes d'1 template pour augmenter les perfs.

Pour le coup ta méthode  est plus longue à la fois pour construire le template et aussi dans l’exécution de celui ci.

Dans ton approche tu check ligne par ligne si le domaine est identique: sort , count of lines + boucle + if logic...Il y a beaucoup plus d’étapes
que dans l'approche "delete lines par regex".

Dans ma logique tu recuperes le domaine et ensuite tu supprimes toutes les lignes d'un coup qui contiennent le même domaine.
Si ta liste contient 1000 urls avec 500 domaines identiques, ma méthode permet de supprimer tous les "doublons" d'1 coup au lieu tester les 500 urls one by one.

Après peut être que je n'ai pas compris ta méthode, n’hésite pas à poster un screenshot ou un snippet de ton approche, ça sera utile pour tous les users Zenno du fofo.


Formation Zennoposter High Level  ▶ Skype : karnivore4949

Pas encore sur Zenno ?    ▶ Rejoindre la communauté du meilleur tool d'automatisation  smile

0
J'aime ❤️

🔴 Hors ligne

Pied de page des forums