Was ist der Vorteil des Schreibens an einen temporären Speicherort und des anschließenden Kopierens an den vorgesehenen Speicherort?

Ich schreibe eine Anwendung, die mit Satellitenbildern funktioniert, und mein Chef hat mich gebeten, mir einige der kommerziellen Anwendungen anzusehen und zu sehen, wie sie sich verhalten. Ich fand ein seltsames Verhalten und fand es dann beim Suchen auch in anderen Standardanwendungen.

Diese Programme schreiben zuerst in den temporären Ordner und kopieren ihn dann an das vorgesehene Ziel.

Beispiel: 7zip extrahiert zuerst in den temporären Ordner und kopiert dann die extrahierten Daten an den Speicherort, an den Sie sie aufgefordert haben, die Daten zu extrahieren.

Ich sehe einige Probleme mit diesem Ansatz:

1. Der temporäre Ordner verfügt möglicherweise nicht über genügend Speicherplatz, während der beabsichtigte Speicherort möglicherweise über so viel Speicherplatz verfügt.

2. Wenn es sich um eine große Datei handelt, kann der Kopiervorgang einen nicht zu vernachlässigenden Zeitraum in Anspruch nehmen.

Ich habe viel darüber nachgedacht, aber ich konnte keinen einzigen positiven Punkt dafür erkennen. Vermisse ich etwas oder hat das einen wirklichen Vorteil?

Ein paar Gründe, die mir einfallen:

• Auf den meisten Plattformen sind Dateiverschiebungen atomar, Dateischreibvorgänge jedoch nicht (insbesondere, wenn Sie nicht alle Daten auf einmal schreiben können). Wenn Sie also das typische Produzenten- / Konsumentenmuster haben (ein Prozess erzeugt Dateien, der andere überwacht ein Verzeichnis und nimmt alles auf, was er findet), schreiben Sie zuerst in einen temporären Ordner und verschieben Sie ihn dann an den tatsächlichen Speicherort, sodass der Konsument niemals einen sehen kann unvollendete Datei.
• Wenn der Vorgang, bei dem die Datei geschrieben wird, zur Hälfte abbricht, befindet sich eine beschädigte Datei auf Ihrer Festplatte. Wenn es sich an einem realen Ort befindet, müssen Sie selbst dafür sorgen, dass es bereinigt wird. Wenn es sich jedoch an einem temporären Ort befindet, kümmert sich das Betriebssystem darum.
• Wenn die Datei zufällig erstellt wird, während ein Sicherungsjob ausgeführt wird, nimmt der Job möglicherweise eine unvollständige Datei auf. temporäre Verzeichnisse sind in der Regel von Sicherungen ausgeschlossen, sodass die Datei nur enthalten ist, wenn sie an den endgültigen Speicherort verschoben wurde.
• Das temporäre Verzeichnis befindet sich möglicherweise in einem schnellen, aber flüchtigen Dateisystem (z. B. einer Ramdisk). Dies kann hilfreich sein, wenn Sie mehrere Teile derselben Datei gleichzeitig herunterladen oder die Datei direkt mit vielen Suchvorgängen verarbeiten. Temporäre Verzeichnisse verursachen in der Regel mehr Fragmentierung als Verzeichnisse mit weniger häufigen Lese-, Schreib- und Löschvorgängen. Wenn Sie das temporäre Verzeichnis auf einer separaten Partition belassen, kann dies dazu beitragen, die Fragmentierung der anderen Partitionen gering zu halten.

TL; DR - Hauptsächlich geht es um Atomarität, das heißt, Sie möchten es so gestalten, dass die Datei (am endgültigen Speicherort) entweder vollständig oder zu einem bestimmten Zeitpunkt überhaupt nicht vorhanden ist.

Dies scheint ein Problem in Windows zu sein, insbesondere im Zusammenhang mit der Verwaltung von Drag & Drop.

Die Entwickler des WINSCP- Clients haben eine eigene Shell-Erweiterung entwickelt, die dieses Drag-Drop-Verhalten außer Kraft setzt und das sofortige Ablegen der Datei in den richtigen Ordner ermöglicht. Sie erklären den Trick in ihrer Dokumentation und, was noch interessanter ist, was das Problem ist und wie sie es gelöst haben.

Hier ist der interessante Teil:

Mithilfe der Windows-Drag & Drop-Mechanik kann die Quellanwendung des Drag & Drop-Vorgangs nicht auf einfache Weise ermitteln, wo die Dateien abgelegt werden. Es ist Aufgabe der Zielanwendung (normalerweise Windows Explorer), Dateien an das Ziel zu übertragen. Es ist ziemlich vernünftig, da die Quellanwendung kaum Dateien an alle möglichen Ziele übertragen kann. Denken Sie daran, dass Sie Dateien nicht nur in ein Verzeichnis, sondern auch in eine ZIP-Datei (oder ein anderes Archiv), ein entferntes Verzeichnis (über FTP, SFTP, SCP usw.), einen Papierkorb usw. ablegen können.

Selbst der Windows Explorer (oder eine andere Zielanwendung wie WinZip) kann offensichtlich keine Dateien von einer möglichen Quelle herunterladen (insbesondere kennt er SFTP / SCP nicht).

Speziell für 7Zip: Der Benutzer ray023 beantwortet diese Frage im SuperUser-Stapel unter Fragen und Antworten: https://superuser.com/a/422463

Wenn Sie Ihre Datei nicht per Drag & Drop ablegen, sondern die in 7-ZIP und Winrar verfügbare Methode "Hier extrahieren" verwenden, werden die Dateien direkt in das richtige Verzeichnis extrahiert.

Wenn Sie irgendeine Art von Datenverarbeitung an der Datei vornehmen müssen (dekodieren / konvertieren / etc ..), ist es besser, eine temporäre Datei zu verwenden und das Ergebnis nach Abschluss und nur dann an das endgültige Ziel zu übertragen.

Leistungen:

1. Nur fertige Dateien erreichen das Ziel
2. Temporäre Dateien können (sollten) sich auf schnellen Medien befinden
3. Vermeiden Sie eine Fragmentierung der endgültigen Datei
4. Ermöglicht die Verwendung anderer Medien als Endziel (FTP, Cloud, was auch immer)
5. Abgebrochene temporäre Dateien sind einfacher zu bereinigen

Ich sehe keine wirklichen Vorteile, wenn ich während der Verarbeitung der Daten direkt an das Ziel schreibe.