So rufen Sie rsync wiederholt auf, bis die Dateien erfolgreich übertragen wurden

Ich versuche, Dateien von einem Remoteserver zu synchronisieren, der nicht zuverlässig ist, was bedeutet, dass die Verbindung "zufällig" fehlschlägt

rsync: Verbindung unerwartet geschlossen

Rsync wird mit --partial aufgerufen, daher möchte ich rsync in einer Schleife aufrufen können, bis die Dateien vollständig übertragen wurden. Es scheint kein Flag zu geben, das rsync anweist, es erneut zu versuchen.

Was wäre der beste Weg, um es zu schreiben? Eine Bash for Loop?

linux bash rsync

— Bruno Lopes
quelle

Die folgenden Antworten sind zwar hilfreich, aber es ist möglicherweise besser, herauszufinden, warum dies fehlschlägt, und sie zum Stillstand zu bringen. Ich gehe davon aus, dass Sie den Server, den Client und das Netzwerk dazwischen steuern, sodass Sie tcpdump an verschiedenen Stellen ausführen können, um zu sehen, wie es geschlossen wurde. Möglicherweise trennt eines Ihrer Firewall- oder VPN-Geräte die Verbindung?

— MarkR

Der Server, mit dem die Verbindung hergestellt wird, ist ein freigegebener Host, sodass ich keinen Root-Zugriff darauf habe. Ich werde vielleicht untersuchen, warum es geschlossen wird, aber ich bin mehr als froh, dass ich es noch einmal versuchen kann. Trotzdem vielen Dank für das Heads-up

— Bruno Lopes

Ich war schockiert, als ich feststellte, dass rsync nicht die Möglichkeit hatte, es erneut zu versuchen!

— Michael

rsync --partial --append hat die Möglichkeit, den Rückgabecode manuell oder in einem Skript zu wiederholen. Duplizieren von: superuser.com/questions/302842/...

— rickfoosusa

Antworten:

Wenn Sie alles auf einmal synchronisieren, rufen Sie rsync in einer Schleife auf, bis Sie mit rsync einen erfolgreichen Rückkehrcode erhalten.

So etwas wie:

RC=1 
while [[ $RC -ne 0 ]]
do
   rsync -a .....   
   RC=$?
done

Dies führt eine Schleife durch, die rsync aufruft, bis der Rückgabewert 0 lautet. Möglicherweise möchten Sie dort einen Sleep hinzufügen, um die DOS-Installation Ihres Servers zu unterbinden.

— David
quelle

Sie können nur schreiben, während! rsync -a ....; schlafe 5; erledigt

— Justin

Seien Sie vorsichtig, wie Sie dies verwenden. Wenn Sie beispielsweise versuchen, es über cron auszuführen, können Probleme mit der Parallelität auftreten.

— Keiran Holloway,

Dies wird zu einer Endlosschleife, wenn ein nicht vorübergehender Fehler auftritt (z. B. ein Berechtigungsfehler beim Lesen oder Schreiben von Dateien). Ich würde empfehlen, den Exit-Status von rsync auf bestimmte Netzwerkfehler zu überprüfen RC=12; while [[ $RC -eq 12 || $RC -eq 30 ]](oder den Exit-Status, den Sie bei Netzwerkabbrüchen sehen).

— Gordon Davisson

Da ich dies nicht (völlig) unbeaufsichtigt ausführe, sind Endlosschleifen und Nebenläufigkeit kein großes Problem, danke.

— Bruno Lopes

Schade, dass in rsync diese Funktion nicht integriert ist, da jede Art von Shell-basierter Schleife in Fällen, in denen die automatische Authentifizierung nicht verfügbar oder nicht geeignet ist, zur Eingabe eines Kennworts auffordert.

— Michael

Ich bin vor einiger Zeit auf dasselbe Problem gestoßen. Am Ende habe ich etwas Ähnliches wie Davids Antwort geschrieben, es aber ein wenig mit maximalen Wiederholungsversuchen aufgepeppt und auf Strg-C reagiert: http://blog.iangreenleaf.com/2009/03/rsync-and-retrying- bis-wir-es-bekommen.html .

— Ian Greenleaf Young
quelle

purtting alles zusammen mit sshpass

while ! sshpass -p 'xxxx' rsync --partial --append-verify --progress -a -e 'ssh -p 22' /source/ remoteuser@1.1.1.1:/dest/; do sleep 5;done

— Toolkit
quelle