FORUM PTT -

FAQ - Jak ściągać pliki z portali...
kamil11 - 14-10-2009, 09:47
: Temat postu: Jak ściągać pliki z portali...
Witam,

szukanie KUIDów na stronie jest dość uciążliwe - trzeba kliknąć na link zobaczyć czy jest KUID, nie ma i na kolejny... ok może po prostu ściągnąć wszystko i sobie zainstalować? Ściąganie wszystkiego to sporo kliknięć... męczarnia... nie obwiniam za to Twórce portalu - zorganizował tak jak chciał (ja preferuje ftpy:)), ale po co się męczyć. Potrzebne jest nam konto shellowe (Linux/Unix):

Kod:

$ mkdir pliki_cdp
$ mkdir stuff
$ cd stuff
$ wget --recursive --no-clobber --domains www.trainz.org --no-parent www.trainz.org/ptt/_download http://www.trainz.org/ptt/_download/_download.html
# ... (trochę może to potrwać:)
Pobrano: 1411 plików, 487M w 19m 3s (436 KB/s)
$ cd ..
$ for x in `find ./stuff/ | grep .cdp`;do cp $x ./pliki_cdp/;done
$ du -sh ./pliki_cdp/
444M    ./pliki_cdp/


logujemy się na konto shellowe z poziomu FTP lub SCP (w zależności co mamy) i kopiujemy katalog do siebie - chyba, że wykonywaliśmy to na lokalnym komputerze:)

pozdrawiam
Alana - 14-10-2009, 18:28
:
WGET pod windows

a komende daje taka
Kod:
wget --recursive --no-clobber --domains www.trainz.org --no-parent www.trainz.org/ptt/_download http://www.trainz.org/ptt/_download/_download.html --accept=cdp -c

zgrywa mi tylko pliki CDP
kamil11 - 15-10-2009, 10:19
:
Zgadza się:)

można optymalizować długo, ale czasami zdarzają się inne pliki zip rar itp:)

ale masz racje:)
Alana - 15-10-2009, 15:48
:
no to --accept=cdp,zip,rar itp
spinmax - 18-10-2009, 20:11
:
a na inne strony tez to dziala ? bo probowalem sobie ulatwic z ptram.eu i jakos mi sciaga wszystko ze strony poza plikami cdp,rar ....

tak to wpisalem

wget --recursive --no-clobber --domains www.ptram.eu --no-parent http://www.ptram.eu/downl...own&kategoria=1 www.ptram.eu/download.php...own&kategoria=1 --accept=cdp,zip,rar,cdp2 -c
Alana - 18-10-2009, 20:20
:
Ten sposob dziala jak struktura katalogow i sposob dzialania serwera z ktorego sciagasz na to pozwala, np odpowiednie potraktowanie strony Chestera dziala ale pare innych stronek juz nie.
spinmax - 18-10-2009, 20:23
:
ok :) tylko ze internet menager pozwala na wyodrebnienie na tej stronce plikow cdp od html i php :) mimo to dziekuje za odpowiedz :)

sciagac sicaga jdnak pliki cdp ale nie wiem czemu sciaga ta reszte jpg,html,php skoro nie sa w oznaczonych jako tylko akceptowane
Tata Muminka - 21-10-2009, 04:36
:
Czy nie szybciej i latwiej zainstalować sobie np Flashget-a, gdzie można wyodrębnić sobie jakie pliki mają zostać ściągnięte?

Szybciej i łatwiej.