rsync ausschließen gemäß .gitignore & .hgignore & svn: ignorieren wie --filter =: C.

Rsync enthält eine raffinierte Option --cvs-excludezum "Ignorieren von Dateien auf die gleiche Weise wie CVS", aber CVS ist seit Jahren veraltet. Gibt es eine Möglichkeit, Dateien auszuschließen, die von modernen Versionskontrollsystemen (Git, Mercurial, Subversion) ignoriert werden?

Zum Beispiel habe ich viele Maven-Projekte von GitHub ausgecheckt. In der Regel enthalten sie .gitignoremindestens eine Auflistung target, das Standard-Maven-Build-Verzeichnis (das möglicherweise auf oberster Ebene oder in Submodulen vorhanden ist). Da der Inhalt dieser Verzeichnisse vollständig verfügbar ist und weitaus größer als der Quellcode sein kann, möchte ich sie bei der Verwendung von rsync für Sicherungen ausschließen.

Natürlich kann ich das explizit, --exclude=target/aber das wird versehentlich nicht verwandte Verzeichnisse unterdrücken, die zufällig benannt werden targetund nicht ignoriert werden sollen.

Und ich konnte eine vollständige Liste der absoluten Pfade für alle Dateinamen und Muster erwähnten in jedem liefern .gitignore, .hgignoreoder svn:ignoreEigentum auf meiner Festplatte, aber das wäre eine riesige Liste, die durch irgendeine Art von Skript erzeugt werden müßte.

Gibt es einen guten Trick, um rsync ihre Ignoriermuster zuzuweisen, da es keine integrierte Unterstützung für VCS-Checkouts außer CVS gibt? Oder eine Art Rückrufsystem, bei dem ein Benutzerskript gefragt werden kann, ob eine bestimmte Datei / ein bestimmtes Verzeichnis enthalten sein soll oder nicht?

Update : --filter=':- .gitignore'Wie von LordJavac vorgeschlagen, scheint es für Git genauso gut zu funktionieren wie --filter=:Cfür CVS, zumindest bei den Beispielen, die ich gefunden habe, obwohl unklar ist, ob die Syntax genau übereinstimmt. --filter=':- .hgignore'funktioniert nicht sehr gut für Mercurial; zB wird .hgignoreeine Zeile wie ^target$(das Mercurial-Äquivalent von Git /target/) von rsync nicht als regulärer Ausdruck erkannt. Und für Subversion scheint nichts zu funktionieren, für das Sie .svn/dir-prop-baseeine Arbeitskopie von 1.6 oder früher analysieren und für eine Arbeitskopie von 1.7 oder später bestürzt die Hände hochwerfen müssten .

Wie von Luksan erwähnt, können Sie dies mit dem --filterWechsel zu tun rsync. Ich habe dies erreicht mit --filter=':- .gitignore'(es gibt ein Leerzeichen vor ".gitignore"), das angibt rsync, eine Verzeichniszusammenführung mit .gitignoreDateien durchzuführen und diese gemäß den Regeln von git auszuschließen. Möglicherweise möchten Sie auch Ihre globale Ignorierdatei hinzufügen, falls Sie eine haben. Um die Verwendung zu vereinfachen, habe ich einen Alias ​​erstellt, zu rsyncdem der Filter gehört.

Sie können git ls-filesdamit die Liste der Dateien erstellen, die von den Dateien des Repositorys ausgeschlossen sind .gitignore. https://git-scm.com/docs/git-ls-files

Optionen:

• --exclude-standardBetrachten Sie alle .gitignoreDateien.
• -o Ignorieren Sie nicht bereitgestellte Änderungen nicht.
• -i Nur ignorierte Dateien ausgeben.
• --directory Geben Sie den Verzeichnispfad nur aus, wenn das gesamte Verzeichnis ignoriert wird.

Das einzige, was ich ignorieren musste, war .git.

rsync -azP --exclude=.git --exclude=`git -C <SRC> ls-files --exclude-standard -oi --directory` <SRC> <DEST>

wie wäre es rsync --exclude-from='path/.gitignore' --exclude-from='path/myignore.txt' source destination?
Es hat bei mir funktioniert.
Ich glaube, Sie können auch mehr --exclude-fromParameter haben.

2018 Lösung bestätigt

rsync -ah --delete 
    --include .git --exclude-from="$(git -C SRC ls-files \
        --exclude-standard -oi --directory >.git/ignores.tmp && \
        echo .git/ignores.tmp')" \
    SRC DST 

Details: --exclude-fromist obligatorisch anstelle von --exclude, da der wahrscheinliche Fall, dass die Ausschlussliste nicht als Argument analysiert wird. Ausschließen von erfordert eine Datei und kann nicht mit Pipes arbeiten.

Die aktuelle Lösung speichert die Ausschlussdatei im Ordner .git, um sicherzustellen, dass sie keine Auswirkungen hat, git statuswährend sie in sich geschlossen bleibt . Wenn Sie möchten, können Sie gerne / tmp verwenden.

Für Quecksilber könnten Sie verwenden

hg status -i | sed 's/^I //' > /tmp/tmpfile.txt

um die Liste der Dateien zu sammeln, die aufgrund von .hgignore- Einschränkungen NICHT unter Quecksilberkontrolle stehen , und dann auszuführen

rsync -avm --exclude-from=/tmp/tmpfile.txt --delete source_dir/ target_dir/

um alle Dateien außer den ignorierten zu synchronisieren. Beachten Sie das Flag -m in rsync, das leere Verzeichnisse von der Synchronisierung ausschließt, da der hg-Status -i nur ausgeschlossene Dateien auflistet, keine Verzeichnisse

Versuche dies:

rsync -azP --delete --filter=":- .gitignore" <SRC> <DEST>

Es kann alle Dateien in das Remote-Verzeichnis kopieren, mit Ausnahme der Dateien in '.gitignore', und Dateien löschen, die sich nicht in Ihrem aktuellen Verzeichnis befinden.

Auf der rsyncManpage zusätzlich zur Standardliste der Dateimuster:

Dateien, die in einem $ HOME / .cvsignore aufgeführt sind, werden der Liste hinzugefügt, und alle Dateien, die in der Umgebungsvariablen CVSIGNORE aufgeführt sind

Meine $ HOME / .cvsignore-Datei sieht also folgendermaßen aus:

.git/
.sass-cache/

um .git und die von Sass generierten Dateien auszuschließen .

Ich hatte eine Reihe sehr großer .gitignoreDateien und keine der "reinen Rsync" -Lösungen funktionierte für mich. Ich habe dieses rsync-Wrapper-Skript geschrieben , es respektiert die .gitignoreRegeln (einschließlich !Ausnahmen .gitignoreim Stile- Stil und Dateien in Unterverzeichnissen) vollständig und hat für mich wie ein Zauber funktioniert.

Lesen Sie den Abschnitt MERGE-FILES FILTER RULES in rsync (1).

Es scheint möglich zu sein, eine rsync --filter-Regel zu erstellen, die .gitignore-Dateien enthält, wenn die Verzeichnisstruktur durchlaufen wird.

Anstatt Ausschlussfilter zu erstellen, können git ls-filesSie jede Datei für rsync auswählen:

#!/usr/bin/env bash

if [[ ! $# -eq 2 ]] ; then
    echo "Usage: $(basename $0) <local source> <rsync destination>"
    exit 1
fi

cd $1
versioned=$(git ls-files --exclude-standard)
rsync --verbose --links --times --relative --protect-args ${versioned} $2

Dies funktioniert auch dann, wenn durch git ls-filesZeilenumbrüche getrennte Pfade zurückgegeben werden. Funktioniert wahrscheinlich nicht, wenn Sie versionierte Dateien mit Leerzeichen in den Dateinamen haben.

Alternativen:

git ls-files -zi --exclude-standard |rsync -0 --exclude-from=- ...

git ls-files -zi --exclude-per-directory=".gitignore" |...

(rsync versteht .gitignore nur teilweise)

Kurze Antwort

rsync -r --info=progress2 --filter=':- .gitignore' SOURCE DEST/

Parameter Bedeutung:

-r: rekursiv

--info=...: Fortschritt anzeigen

--filter=...: Ausschließen durch die in der .gitignore-Datei aufgeführten Regeln