Übergröße

Daten komprimieren

Die Kompression der Daten während des Übertragens kostet einerseits Zeit, andererseits unterstützt das Duo SSH/SCP nur das Komprimieren mittels Gzip. Das Verfahren ist zwar weit verbreitet, aber nicht immer die beste Wahl. Möchten Sie ein anderes Verfahren verwenden, bleibt Ihnen nur das Komprimieren der Dateien vor dem Transfer und das Auspacken auf dem Zielsystem, beispielsweise mittels Xz oder 7z.

Welches Verfahren sich am besten eignet, hängt in erster Linie von den zu verarbeitenden Daten ab. Eine vollständige Übersicht zu den einzelnen Verfahren und deren Grad der Kompression und Geschwindigkeit beim Verarbeiten der Daten gibt ein Artikel von Martin Steigerwald [1].

Es gilt jedoch, die Wahl des Formats noch in einer ganz anderen Hinsicht zu beachten: Möchten Sie die komprimierte Datei auf dem Zielsystem wieder auspacken, stellen Sie am besten vorab sicher, dass dort auch ein geeignetes Programm bereit steht.

Neues Format

Eine weitere Möglichkeit besteht in der Manipulation des externen Datenträgers und dessen Dateisystem. Das Erzeugen eines Dateisystems gelingt mit den Mkfs-Werkzeugen. Mkfs steht für "make file system", für (fast) jedes Dateisystem steht ein eigenes Kommando bereit. So erzeugt mkfs.ext4 /dev/sdb1 ein Ext4-Dateisystem auf dem angegebenen Device /dev/sdb1.

Die maximale Dateigröße in einem Dateisystem variiert erheblich und liegt beispielsweise zwischen 16 TByte bei Ext2, 1 EByte bei Ext4 und 16 EByte bei ZFS [2].

Je nach Größe des Datenträgers nimmt das Anlegen eines Dateisystems etwas Zeit in Anspruch. Beachten Sie dabei, dass bei diesem Vorgang sämtliche Informationen zu den bereits abgelegten Daten auf dem Speichermedium verloren gehen.