Linux Tipps (3) wget

Websiten und Dateien speichern

wget -r - 30   -e robots=off  -p -A jpg,png --restrict-file-names=windows --user-agent="Mozilla/5.0 (X11; U; Linux i686; de; rv:1.9b5) Gecko/2008050509 Firefox/3.0b5" http://domain.example

• -r rekursiven Download
• -l Anzahl der Schritte
• -e robots=off Ignoriert die robots.txt
• -p den Inhalt einer Seite herunterladen
• -A nur Dateien mit dieser Endung (macht manchmal Probleme)
• --restrict-file-names=windows wandelt ungültige Zeichen in Dateinamen um, nützlich wenn z.B. Fragezeichen in einer URL vorkommen

GNU Wget Manual
wget ubuntuusers