Mit wget Dateien rekursiv herunterladen – auch per FTP

wget im Einsatz
wget im Einsatz
28.05.2012 18:22

Heutzutage lädt man sich Dateien meist über den Browser herunter. Ein Mausklick genügt und der Download läuft. Möchte man sich jedoch mehrere Dateien von einer Seite angeln, artet das schnell in eine Klickorgie aus. Vor einem ähnlichen Problem steht man, wenn man per FTP mehrere Dateien von einem Server holen möchte: Das ftp-Kommando kann immer nur einzelne Dateien aus einem einzigen Verzeichnis herunterladen.

Sofern man auf dem fremden Server ein Benutzerkonto besitzt, könnte man sich dort natürlich etwa per SSH einloggen, die gewünschten Verzeichnisse und Dateien per tar oder zip in ein entsprechendes Archiv packen und dann dieses anschließend auf den eigenen Rechner übertragen.

Es geht aber viel einfacher und komfortabler mit einem kleinen Programm, das jede Distribution mitbringt, auf der Festplatte aber häufig ein Schattendasein führt: wget. Das Kommandozeilenwerkzeug lädt automatisch beliebige Dateien via HTTP, HTTPS oder FTP herunter. Es genügt sogar ein einziger Befehl, um es einen kompletten Server spiegeln zu lassen.

Singular

Zunächst holt wget eine einzelne Datei via:

wget --user=benutzername --password=passwort ftp://ftp.example.com/einedatei.zip

Hier meldet sich wget mit dem benutzernamen und dem passwort am FTP-Server ftp.example.com an und lädt einedatei.zip herunter. Nach dem gleichen Prinzip angelt sich wget auch per HTTP eine Datei vom Web-Server:

wget --user=benutzername --password=passwort http://www.example.com/einedatei.zip

Sollte man keinen Benutzernamen und Passwort benötigen, lässt man dieses Duo einfach weg:

wget http://www.example.com/einedatei.zip

Plural

Mehrere Dateien deckt man mit den üblichen Platzhaltersymbolen ab:

wget --user=benutzername --password=passwort ftp://www.example.com/eine*

Alle Dateien und sämtliche Unterverzeichnisse aus dem Verzeichnis einverzeichnis holt:

wget -r -l 10 --user=benutzername --password=passwort ftp://ftp.example.com/einverzeichnis/

Das -r weist wget an, auch in alle Unterverzeichnisse herabzusteigen – standardmäßig genau bis zu 5 Verzeichnisebenen. Durch den Parameter -l kann man diese Vorgabe ändern, bei -l 10 steigt wget bis zu 10 Verzeichnisebenen herab. Ein -l inf hebt die Begrenzung komplett auf, wget lädt dann alle Unterverzeichnisse herunter, egal wie tief sie verschachtelt sind. Die Dateien landen übrigens auf der eigenen Festplatte in einem Verzeichnis, das so wie der Server heißt – im Beispiel also unter ftp.example.com.
Einen kompletten Server spiegelt schließlich:

wget -m --user=benutzername --password=passwort ftp://ftp.example.com/

Doch Vorsicht: Das Spiegeln eines FTP-Servers kann diesen stark in Anspruch nehmen. Viele Betreiber von FTP-Servern sehen es daher nicht gerne, wenn man hemmungslos große Datenmengen absaugt.


Kommentare

Tipp der Woche

Ubuntu 14.10 und VirtualBox
Ubuntu 14.10 und VirtualBox
Tim Schürmann, 08.11.2014 18:45, 2 Kommentare

Wer Ubuntu 14.10 in einer virtuellen Maschine unter VirtualBox startet, der landet unter Umständen in einem Fenster mit Grafikmüll. Zu einem korrekt ...

Aktuelle Fragen

Neue SuSE-Literatur
Roland Welcker, 14.01.2015 14:10, 1 Antworten
Verehrte Linux-Freunde, seit Hans-Georg Essers Buch "LINUX" und Stefanie Teufels "Jetzt lerne ich...
DVD abspielen unter openSUSE 13.1
Michael Pfaffe, 12.01.2015 11:48, 6 Antworten
Hallo Linuxer, Bisher habe ich meine DVD´s mit linDVD unter openSUSE abgespielt. Mit der Versi...
Kontrollleiste SuSE 12.3 gestalten
Roland Welcker, 31.12.2014 14:06, 1 Antworten
Wie bekomme ich das Icon eines beliebigen Programms (aktuell DUDEN) in die Kontrollleiste und kan...
flash-player
roland reiner, 27.12.2014 15:24, 7 Antworten
Mein Flashplayer funktioniert nicht mehr-Plug in wird nicht mehr unterstütz,auch über google chro...
PCLinuxOS Version 2014.08 "FullMonty" Umstellung auf deutsch
Karl-Heinz Welz, 19.12.2014 09:55, 10 Antworten
Hallo, liebe Community, ich bin 63 Jahre alt und möchte jetzt nach Jahrzehnten Windows zu Linux...

Jetzt auf den Mailinglisten

Re: [EasyLinux-Ubuntu] Mint 17.1
Karl-Heinz, 26.01.2015 22:00
Am Mon, 26 Jan 2015 19:06:22 +0100 schrieb Gerd Ewald : Hallo Werner, > und berichte bitte. Ich hätte...
Re: [EasyLinux-Ubuntu] Mint 17.1
Karl-Heinz, 26.01.2015 21:45
Am Mon, 26 Jan 2015 20:47:58 +0100 schrieb Werner : Hallo Werner, > Auf Deine Frage : LibreOffice, FF,...
Re: [EasyLinux-Ubuntu] Mint 17.1
Heinz-Stefan Neumeyer, 26.01.2015 21:02
Am Montag, den 26.01.2015, 20:47 +0100 schrieb Werner: Hallo Werner > > Auf Deine Frage : LibreOff...
Re: [EasyLinux-Ubuntu] Mint 17.1
Werner, 26.01.2015 20:47
Hallo Stefan. Auf Deine Frage : LibreOffice, FF, Gimp, Thunderbird - auf englisch. Calculator, Texteditor...
Re: [EasyLinux-Ubuntu] Mint 17.1
Gerd Ewald, 26.01.2015 19:06
Hallo Werner, Du hattest am Mon, dem 26.01.15 um 15:50 +0100 CET folgendes geschrieben: >Hallo Stefan....