Rsync-Filter: Kopieren nur eines Musters

Ich versuche, ein Verzeichnis zu erstellen, in dem alle und nur meine aus LaTeX kompilierten PDF-Dateien gespeichert werden. Ich mag es, jedes Projekt in einem separaten Ordner zu speichern, der sich alle in einem großen Ordner namens befindet LaTeX. Also habe ich versucht zu rennen:

rsync -avn *.pdf ~/LaTeX/ ~/Output/

das sollte alle pdfs in finden ~/LaTeX/und sie in den ausgabeordner übertragen. Das geht nicht. Es wird mir mitgeteilt, dass für " *.pdf" keine Übereinstimmungen gefunden wurden . Wenn ich diesen Filter auslasse, listet der Befehl alle Dateien in allen Projektordnern unter LaTeX auf. Es ist also ein Problem mit dem * .pdf-Filter. Ich habe versucht, ~/durch den vollständigen Pfad zu meinem Ausgangsverzeichnis zu ersetzen , aber das hatte keine Auswirkungen.

Ich benutze zsh. Ich habe versucht, dasselbe in bash und sogar mit dem Filter zu tun, der jede einzelne Datei in jedem Unterverzeichnis auflistet ... Was ist hier los?

Warum versteht rsync meinen PDF-Filter nicht?

OKAY. Also Update: Nein, ich versuche es

rsync -avn --include="*/" --include="*.pdf" LaTeX/ Output/

Und das gibt mir die ganze Dateiliste. Ich denke, weil alles zum ersten Muster passt ...

TL, DR:

rsync -am --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

Rsync kopiert die Quelle (n) zum Ziel. Wenn Sie *.pdfals Quellen übergeben, erweitert die Shell dies auf die Liste der Dateien mit der .pdfErweiterung im aktuellen Verzeichnis. Es findet keine rekursive Durchquerung statt, da Sie kein Verzeichnis als Quelle übergeben haben.

Sie müssen also ausführen rsync -a ~/LaTeX/ ~/Output/, aber mit einem Filter, um rsync anzuweisen, .pdfnur Dateien zu kopieren . Die Filterregeln von Rsync können beim Lesen des Handbuchs entmutigend wirken, Sie können jedoch mit nur wenigen einfachen Regeln viele Beispiele erstellen.

• Ein- und Ausschlüsse:

  • Ausschließen von Dateien nach Name oder Ort ist einfach: --exclude=*~, --exclude=/some/relative/location(bezogen auf das Quellargument, zB Ausgeschlossen sind ~/LaTeX/some/relative/location).
  • Wenn Sie nur einige Dateien oder Speicherorte abgleichen möchten, schließen Sie sie ein, schließen Sie jedes Verzeichnis ein, das zu ihnen führt (zum Beispiel mit --include=*/), und schließen Sie den Rest mit aus --exclude='*'. Das ist weil:
  • Wenn Sie ein Verzeichnis ausschließen, wird alles darunter ausgeschlossen. Die ausgeschlossenen Dateien werden überhaupt nicht berücksichtigt.
  • Wenn Sie ein Verzeichnis einfügen, wird der Inhalt nicht automatisch eingefügt. In neueren Versionen --include='directory/***'wird das erledigt.
  • Für jede Datei gilt die erste Übereinstimmungsregel (und alles, was niemals übereinstimmt, ist enthalten).

• Muster:

  • Wenn ein Muster kein a enthält /, gilt es für den Dateinamen sans directory.
  • Wenn ein Muster mit endet /, gilt es nur für Verzeichnisse.
  • Wenn ein Muster mit beginnt /, gilt es für den gesamten Pfad aus dem Verzeichnis, an das als Argument übergeben wurde rsync.
  • *ein beliebiger Teilstring einer einzelnen Verzeichniskomponente (dh er stimmt nie überein /); **Stimmt mit jedem Pfad-Teilstring überein.

• Wenn eine Quelle Argument mit einem Ende /, dessen Inhalt kopiert werden ( rsync -r a/ berstellt b/foofür jeden a/foo). Andernfalls wird das Verzeichnis selbst kopiert ( rsync -r a berstellt b/a).

Daher müssen wir hier *.pdfVerzeichnisse einschließen , die sie enthalten, und alles andere ausschließen.

rsync -a --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

Beachten Sie, dass hierdurch alle Verzeichnisse kopiert werden, auch diejenigen, die keine übereinstimmende Datei oder kein entsprechendes Unterverzeichnis enthalten. Dies kann mit der --prune-empty-dirsOption vermieden werden (dies ist keine universelle Lösung, da Sie dann ein Verzeichnis nicht einmal kopieren können, indem Sie es explizit abgleichen, dies ist jedoch eine seltene Anforderung).

rsync -am --include='*.pdf' --include='*/' --exclude='*' ~/LaTeX/ ~/Output/

rsync -av --include="*/" --include="*.pdf" --exclude="*" ~/Latex/ ~/Output/ --dry-run

In der Standardeinstellung wird alles eingeschlossen, sodass Sie nach dem Einschließen der zu übertragenden Dateien explizit alles ausschließen müssen . Entfernen Sie den --dry-run, um die Dateien tatsächlich zu übertragen.

Wenn Sie anfangen mit:

--exclude '*' --include '*.pdf'

Dann schließt das gierige Matching alles gleich aus.

Wenn du es versuchst:

--include '*.pdf' --exclude '*' 

Dann werden nur PDF-Dateien in den Ordner der obersten Ebene übertragen. Es folgen keine Verzeichnisse, da diese durch '*' ausgeschlossen sind.

Wenn Sie ein Muster wie dieses verwenden *.pdf, „erweitert“ die Shell dieses Muster, dh sie ersetzt das Muster durch alle Übereinstimmungen im aktuellen Verzeichnis. Dem ausgeführten Befehl (in diesem Fall rsync) ist nicht bekannt, dass Sie versucht haben, ein Muster zu verwenden.

Wenn Sie zsh verwenden , gibt es jedoch eine einfache Lösung: Das **Muster kann verwendet werden, um Ordner rekursiv abzugleichen. Versuche dies:

rsync -avn ~/LaTeX/**/*.pdf ~/Output/

Sie können findeine Zwischenliste von Dateien ( files_to_copy) verwenden, um Ihr Problem zu lösen. Stellen Sie sicher, dass Sie sich in Ihrem Home-Verzeichnis befinden.

find LaTeX/ -type f -a -iname "*.pdf" > files_to_copy && rsync -avn --files-from=files_to_copy ~/ ~/Output/ && rm files_to_copy

Mit Bash getestet.

Nach dem Abschnitt "INCLUDE / EXCLUDE PATTERN RULES" auf der Manpage zu urteilen, ist dies der richtige Weg

rsync -avn --include="*/" --include="*.pdf" ~/Latex/ ~/Output/

Der entscheidende Unterschied zwischen dieser und der Antwort von kbrd ist das --include="*/"Flag, das rsync anweist, alle gefundenen Verzeichnisse zu kopieren, unabhängig von ihrem Namen. Dies ist erforderlich, da rsync nicht in ein Unterverzeichnis zurückkehrt, es sei denn, es wurde angewiesen, dieses Unterverzeichnis zu kopieren.

Beachten Sie auch, dass die Anführungszeichen verhindern, dass die Shell versucht, die Muster zu Dateinamen relativ zum aktuellen Verzeichnis zu erweitern, und eine der folgenden Aktionen ausführt:

1. Erfolgreicher und durcheinander bringender Filter (nicht allzu wahrscheinlich in der Mitte einer solchen Flagge, obwohl Sie wirklich nie wissen, wann jemand eine Datei mit dem Namen --include=foo.pdf... erstellt)

2. Wenn dies fehlschlägt und möglicherweise ein Fehler auftritt, anstatt den Befehl auszuführen (wie Sie es bei zsh standardmäßig festgestellt haben).

Wie wäre es damit:

rsync -avn --include="*.pdf" ~/Latex/ ~/Output/

Hier ist etwas, das funktionieren sollte, ohne find zu verwenden. Der Unterschied zu bereits geposteten Antworten ist die Reihenfolge der Filterregeln. Filterregeln in einem rsync-Befehl funktionieren ähnlich wie iptable-Regeln. Die erste Regel, mit der eine Datei übereinstimmt, wird verwendet. Von der Manualseite :

Während die Liste der zu übertragenden Dateien / Verzeichnisse erstellt wird, vergleicht rsync die zu übertragenden Namen der Reihe nach mit der Liste der Einschluss- / Ausschlussmuster, und das erste übereinstimmende Muster wird berücksichtigt: Wenn es sich um ein Ausschlussmuster handelt, handelt es sich um diese Datei übersprungen; Wenn es sich um ein Include-Muster handelt, wird dieser Dateiname nicht übersprungen. Wird kein passendes Muster gefunden, wird der Dateiname nicht übersprungen.

Daher benötigen Sie einen Befehl wie folgt:

rsync -avn --include="**.pdf" --exclude="*" ~/LaTeX/ ~/Output/

Beachten Sie das Muster "**. Pdf". Nach der Manpage :

Wenn das Muster ein / (ohne abschließendes /) oder ein "**" enthält, wird es mit dem vollständigen Pfadnamen abgeglichen, einschließlich aller führenden Verzeichnisse. Wenn das Muster kein / oder "**" enthält, wird es nur mit der letzten Komponente des Dateinamens abgeglichen. (Denken Sie daran, dass der Algorithmus rekursiv angewendet wird, sodass "vollständiger Dateiname" tatsächlich ein beliebiger Teil eines Pfades vom Startverzeichnis abwärts sein kann

In meinem kleinen Test funktioniert dies rekursiv im Verzeichnisbaum und wählt nur die PDFs aus.

Dies ist meine bevorzugte Lösung:

find source_dir -iname '*.jpg' -print0 |  rsync -0 -v --files-from=- . destination_dir/

Der findBefehl ist einfacher zu verstehen als die Einschluss- / Ausschlussregeln von rsync:-)

Wenn Sie nur PDF-Dateien kopieren möchten, wechseln Sie einfach .jpgzu.pdf