Download ricorsivo immagini da gallerie con thumbnails

Postate qui per tutte le discussioni legate a Linux in generale.

Moderatore: Staff

Regole del forum
1) Citare sempre la versione di Slackware usata, la versione del Kernel e magari anche la versione della libreria coinvolta. Questi dati aiutano le persone che possono rispondere.
2) Per evitare confusione prego inserire in questo forum solo topic che riguardano appunto Gnu/Linux in genere, se l'argomento è specifico alla Slackware usate uno dei forum Slackware o Slackware64.
3) Leggere attentamente le risposte ricevute
4) Scrivere i messaggi con il colore di default, evitare altri colori.
5) Scrivere in Italiano o in Inglese, se possibile grammaticalmente corretto, evitate stili di scrittura poco chiari, quindi nessuna abbreviazione tipo telegramma o scrittura stile SMS o CHAT.
6) Appena registrati è consigliato presentarsi nel forum dedicato.

La non osservanza delle regole porta a provvedimenti di vari tipo da parte dello staff, in particolare la non osservanza della regola 5 porta alla cancellazione del post e alla segnalazione dell'utente. In caso di recidività l'utente rischia il ban temporaneo.
Rispondi
Avatar utente
sberla54
Master
Master
Messaggi: 1500
Iscritto il: gio 24 giu 2004, 0:00
Slackware: 13.0
Desktop: Gnome (o Fluxbox)
Distribuzione: Ubuntu
Località: Bologna
Contatta:

Download ricorsivo immagini da gallerie con thumbnails

Messaggio da sberla54 »

Ciao a tutti ragazzi.
E' un po' che non ci si sente ma, come al solito, quando ho bisogno di un consiglio d'informatica che non sia da n00b non c'e' posto migliore di questo a cui rivolgersi :)

La questione e' questa:
vorrei scaricare numerose immagini dalla galleria di un sito, che le mostra inizialmente come thumbnail, divise in diverse pagine, inserite in altrettante categorie.

Il fatto e' che si tratta di un sito a pagamento e gia' che pago l'abbonamento vorrei sfruttarlo per crearmi una bella raccolta da tenere sul computer anche quando non saro' piu' abbonato.

Sono sicuro che ci sia il modo, ma non so come fare.

Semplici estensioni per Firefox, come DownThemAll, non sono sufficienti.

Quel che cerco e' qualcosa di questo tipo: https://addons.mozilla.org/en-US/firefo ... ownloader/
Ma quest'estensione e' disponibile solo per Windows.

Anche questa da l'idea: https://addons.mozilla.org/en-US/firefo ... t-grabber/
Pero' funziona solo coi siti di image hosting.

Qualcuno di voi sa aiutarmi a creare uno script con wget, sitecopy o tools simili?
Qualcosa che navighi ricorsivamente una sezione di un sito scaricando cio' che trova...

Mi andrebbe bene anche scaricare la struttura del sito, oppure sia le immagini a dimensione reale che le miniature, tanto andrei poi a cancellare cio' che non m'interessa sulla base della dimensione dei files.

E' possibile?
C'avete mai provato?

Grazie in anticipo!

Avatar utente
conraid
Staff
Staff
Messaggi: 13630
Iscritto il: gio 14 lug 2005, 0:00
Nome Cognome: Corrado Franco
Slackware: current64
Desktop: kde
Località: Livorno
Contatta:

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da conraid »


rik70
Iper Master
Iper Master
Messaggi: 2492
Iscritto il: gio 10 mar 2011, 9:21
Slackware: 15.0
Kernel: 5.15.x-generic
Desktop: Sway
Distribuzione: Arch Linux

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da rik70 »

Hai provato con 'lftp'?

Avatar utente
sberla54
Master
Master
Messaggi: 1500
Iscritto il: gio 24 giu 2004, 0:00
Slackware: 13.0
Desktop: Gnome (o Fluxbox)
Distribuzione: Ubuntu
Località: Bologna
Contatta:

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da sberla54 »

Ciao Conraid!
E' molto interessante!
Lui si scarica tutto quello che trova poi io vado a tenermi solo cio' che m'interessa...

Solo un dubbio mi viene, cosi' al volo: riuscira' a risultare loggato, di modo da poter accedere alle sezioni a pagamento?
Hai provato con 'lftp'?
Mi ricordo che provai ad usarlo tempo fa e non ci capii niente... :)

Avatar utente
ZeD
Linux 1.x
Linux 1.x
Messaggi: 112
Iscritto il: ven 28 ott 2005, 12:30
Slackware: 12.1
Località: Terra

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da ZeD »

Tu vuoi pornzilla

Nonostante il nome (e le intenzioni dell'autore) è un'insieme di bookmarklet fantastiche, e ci dovrebbe essere anche una che fa al caso tuo

rik70
Iper Master
Iper Master
Messaggi: 2492
Iscritto il: gio 10 mar 2011, 9:21
Slackware: 15.0
Kernel: 5.15.x-generic
Desktop: Sway
Distribuzione: Arch Linux

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da rik70 »

sberla54 ha scritto:
Hai provato con 'lftp'?
Mi ricordo che provai ad usarlo tempo fa e non ci capii niente... :)
:)

Ad ogni modo, se non risolvi con gli altri suggerimenti, o vuoi comunque divertirti, puoi provare a fare qualche test con lftp.

Tutto dipende da come il sito in questione gestisce l'autenticazione e l'accesso degli utenti a file e directory.

La prima cosa da fare, a scanso di equivoci, è piazzare nella tua home il config di lftp:

Codice: Seleziona tutto

cp -iv /etc/lftp.conf $HOME/.lftp/rc
alla fine del file $HOME/.lftp/rc trovi questa stringa:

Codice: Seleziona tutto

# set http:user-agent  "[...]"
Potrebbe essere utile decommentarla e metterci l'user-agent di un browser a tua scelta.
Una cosa tipo:

Codice: Seleziona tutto

set http:user-agent "Mozilla/5.0 (X11; U; Linux i686; it; rv:1.9.2.15) Gecko/20110305 IceCat/3.6.15 (like Firefox/3.6.15)"
Fatto questo, puoi sperimentare qualche comando, ad esempio un semplice list:

Codice: Seleziona tutto

lftp -c 'open -u <tuousername> <URL>;ls'
Ti verrà richiesta la password
Oppure dopo '<tuousername>' inserisci una virgola e subito dopo la password (senza spazi):

Codice: Seleziona tutto

lftp -c 'open -u <tuousername>,<password> <URL>;ls'
Ovviamente è in quel '<URL>' che si gioca la partita: devi capire esattamente dove indirizzare lftp.

Se l'output ti restituisce qualcosa di diverso da un semplice *vaffa*, si può provare a tirare giù il possibile.

Bye

Avatar utente
sberla54
Master
Master
Messaggi: 1500
Iscritto il: gio 24 giu 2004, 0:00
Slackware: 13.0
Desktop: Gnome (o Fluxbox)
Distribuzione: Ubuntu
Località: Bologna
Contatta:

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da sberla54 »

Tu vuoi pornzilla
Ahahaha fantastica idea LOL

Io pero' c'ho dato un po' un'occhiata e non mi sembra che ci sia qualcosa che fa al caso mio.
Cioe', sicuramente c'e' qualcosa capace di scaricare tutte le immagini linkate dietro una thumbnail in una singola pagina, ma non c'e' niente capace di farlo automaticamente in maniera ricorsiva, navigando tutte le pagine.
In quel modo dovrei aprire una pagina alla volta e scaricarla...
Mi sbaglio?
Ad ogni modo, se non risolvi con gli altri suggerimenti, o vuoi comunque divertirti, puoi provare a fare qualche test con lftp.
...
Se l'output ti restituisce qualcosa di diverso da un semplice *vaffa*, si può provare a tirare giù il possibile.
E' interessante, si!
Grazie mille!

Immaginavo comunque che cio' che chiedevo non fosse tanto intuitivo e semplice, pero' speravo fosse un po' piu' semplice di cosi'...

Avatar utente
slux
Linux 3.x
Linux 3.x
Messaggi: 789
Iscritto il: dom 20 mar 2005, 0:00
Nome Cognome: Andrea Amerini
Slackware: 14.1 x86
Kernel: 3.12.0-smp
Desktop: xfce 4.10
Località: Prato
Contatta:

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da slux »

Ma un semplice wget -r ?Oppure ho capito male?

Avatar utente
414N
Iper Master
Iper Master
Messaggi: 2922
Iscritto il: mer 13 feb 2008, 16:19
Slackware: 15.0
Kernel: 5.15.19
Desktop: KDE5
Località: Bulagna
Contatta:

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da 414N »

Ma fabbricare una galleria tramite l'estensione Flashgot per Firefox non fa quello che vuoi tu?

Avatar utente
sberla54
Master
Master
Messaggi: 1500
Iscritto il: gio 24 giu 2004, 0:00
Slackware: 13.0
Desktop: Gnome (o Fluxbox)
Distribuzione: Ubuntu
Località: Bologna
Contatta:

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da sberla54 »

Ma un semplice wget -r ?Oppure ho capito male?
No, in realta' la mia prima idea era proprio wget, ma io non lo so usare...anche per quello ho aperto il topic :)

Immagino faccia quello che fa http://www.httrack.com/ consigliato da Conraid no? Scaricare tutto il sito, immagini e tutto il resto?
Rimarrebbe eventualmente il problema di utilizzarlo da loggato, di modo da poter scaricare le sezioni per abbonati...
Ma fabbricare una galleria tramite l'estensione Flashgot per Firefox non fa quello che vuoi tu?
Non ti ho capito :)
Conosco l'estensione, e' simile a DownThemAll che uso, ma non credo possa essermi utile...

Avatar utente
slux
Linux 3.x
Linux 3.x
Messaggi: 789
Iscritto il: dom 20 mar 2005, 0:00
Nome Cognome: Andrea Amerini
Slackware: 14.1 x86
Kernel: 3.12.0-smp
Desktop: xfce 4.10
Località: Prato
Contatta:

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da slux »

sberla54 ha scritto:No, in realta' la mia prima idea era proprio wget, ma io non lo so usare...anche per quello ho aperto il topic

Codice: Seleziona tutto

wget -r --user=utente --password=pass http://www.sito.com

Avatar utente
414N
Iper Master
Iper Master
Messaggi: 2922
Iscritto il: mer 13 feb 2008, 16:19
Slackware: 15.0
Kernel: 5.15.19
Desktop: KDE5
Località: Bulagna
Contatta:

Re: Download ricorsivo immagini da gallerie con thumbnails

Messaggio da 414N »

sberla54 ha scritto: Non ti ho capito :)
Conosco l'estensione, e' simile a DownThemAll che uso, ma non credo possa essermi utile...
http://flashgot.net/features#build_gallery
slux ha scritto:

Codice: Seleziona tutto

wget -r --user=utente --password=pass http://www.sito.com
In realtà, il flag -m sarebbe più consono (abilita il mirroring con tutto quel che ci va dietro), ma dubito che il sito abbia autenticazione user/password su HTTP...

Rispondi