Menu

Crunch + WGET [Résolu]

- - Dernière réponse :  titou - 23 mai 2019 à 16:32
Bonjour,

Je voudrais faire un script (ou une ligne de commande) qui permet de télécharger des fichiers (dont le nom est inconnus) à partir d'une url definie: www.exemple.com/fichier/g_XXXXXXXXXX.jpg

J'aimerai savoir si crunch + wget permette de le faire directement.
Vu l'exemple si dessus je sais que ça va prendre du temps pour 10 caractère alphanumérique (MAJ + min)
Pour l'instant je ne vois pas beaucoup d'aide en ligne.
Merci d'avance!

Configuration: Windows / Chrome 73.0.3683.103
Afficher la suite 

3 réponses

Messages postés
36563
Date d'inscription
dimanche 7 novembre 2010
Statut
Contributeur
Dernière intervention
17 juin 2019
3609
0
Merci
Salut,

Si ce n'est que des "*.jpg" à récupérer, wget peut le faire tout seul comme un grand (voir man wget).


Hello merci de cette réponse,
Visiblement cela ne fonctionne pas de mon coter, le dossier me répond l'erreur 404, pourtant avec l'option --no-parent, il ne devrait pas le prendre en compte.
Sachant que le dossier répond une erreur 404 voici la commande tapée (sauf pour exemple)
wget -r -l1 --no-parent -A ".jpg" http://exemple.com/dir/

Les images ne sont pas référencés sur le site, d'ou ma demande avec Crunch.
Je continue mes recherche sur wget. Mais je sens que je vais devoir passer par crunch.


Cordialement,
Titou
Commenter la réponse de zipe31
Messages postés
190
Date d'inscription
jeudi 13 décembre 2018
Statut
Membre
Dernière intervention
14 juin 2019
7
0
Merci
salut,

man wget 
puis chercher
accept-regex
Pas mal sauf que le dossier parent n'est pas accessible (404) les images ne sont pas référencées dans le site. Donc pas de récursivité possible.
J'aurai aimé trouver une solution toute simple sur wget mais je sens que je vais devoir passer par crunch.
D’où m'a demande particulière.
Commenter la réponse de lEprofSonDkon
0
Merci
J'ai trouvé:
wget $(crunch 39 39 abcdefghijklmnopqrstuvwxyz0123456789ABCDEFGHIJKLMNOPQRSTUVWYXZ -t http://exemple.comr/dir/g_@@@@@@@@@.jpg)

Merci a vous pour vos réponses
lEprofSonDkon
Messages postés
190
Date d'inscription
jeudi 13 décembre 2018
Statut
Membre
Dernière intervention
14 juin 2019
7 -
'comprends pas. :(
quelles regex as-tu essayées ?
là non plus, il n'y a pas de récursivité;
tu ne fais que générer une liste de noms...

est-il donc requis d'avoir de la récursivité ?
tu sembles connaître le répertoire où sont les images.
> lEprofSonDkon
Messages postés
190
Date d'inscription
jeudi 13 décembre 2018
Statut
Membre
Dernière intervention
14 juin 2019
-
Effectivement je connais le dossier ou sont les images mais je ne connais pas quelle nom elles peuvent avoir du coup c'est une sorte de brut force pour les trouver.
La solution que j'ai fait environ 8000 Peta octets de recherche :/
C'est très long.
Commenter la réponse de titou