Wie gehen Sie mit der Datenarchivierung um? [geschlossen]

Backups sind eine Sache, aber Langzeitarchivierung ist eine andere. Beispielsweise müssen Sie möglicherweise E-Mails 7 Jahre lang speichern oder alle Projektdaten auf unbestimmte Zeit aufbewahren. Früher habe ich Archive auf Band gespeichert, aber dann wurden Bänder zerstört (Laufwerke reißen das Band heraus). Also ... schreibe auf 2 Bänder, höre ich dich sagen. Tun das andere? Haben Sie 2 (oder mehr) Bänder mit denselben Daten für Redundanz?

Das andere Problem ist jedoch, dass Bänder normalerweise nicht von verschiedenen Anbietern von Sicherungssoftware gelesen werden können. Wenn Sie beispielsweise über 10 Jahre von Arcserve -> Backup Exec -> Commvault wechseln, müssen Sie alle drei Systeme behalten, damit Sie alte Daten wiederherstellen können. Ebenso für Hardware. Alte Bänder sind möglicherweise nicht mit einem Barcode versehen. Möglicherweise nicht kompatibel mit der neuen Bibliothek usw. usw. Behalten Sie also alte Bandhardware UND alte Software für den Fall, dass Sie möglicherweise eine 10 Jahre alte Datei wiederherstellen müssen?

Oder ... migrieren Sie beim Wechsel zu einem neuen Sicherungssystem alle archivierten Daten auf das neue System und archivieren sie erneut auf neuen Bändern? Das könnte ein großer Job sein.

Irgendwelche Gedanken?

Über wie viele Daten sprechen wir? Unsere "Archiv" -Daten sind so klein, dass wir sie nur im Live-Speicher (auf einem NAS-Gerät) aufbewahren, der mit den üblichen Live-Daten gesichert wird. Sie existieren also genauso wie unsere üblichen Daten und unterliegen denselben Wiederherstellungstechniken ohne sich Sorgen machen zu müssen, dass die jahrzehntealte Technologie erhalten bleibt. Wenn unsere Live-Daten auf eine neue Speicherplattform verschoben werden, wird das Archiv mitgeschaltet. Wir haben die Berechtigungen für Archivdaten auch so festgelegt, dass nur ein Mitglied der Archivsicherheitsgruppe (von der es nur sehr wenige Mitglieder gibt) Zugriff hat, um etwas aus diesen Ordnern zu entfernen.

Wenn Sie mit mehr Daten arbeiten, als vernünftigerweise im Live-Speicher aufbewahrt werden können, ist Band möglicherweise die beste Wahl für die Langzeitspeicherung, zusammen mit der Aufbewahrung von mindestens zwei Kopien an verschiedenen kontrollierten Speicherorten. Bringen Sie sie alle paar Jahre heraus, um sicherzustellen, dass die Medien noch lesbar sind, und migrieren Sie von älteren Medien zu neuen Medien, wenn Sie den Anbieter wechseln, um sicherzustellen, dass Sie weiterhin auf die Daten zugreifen können.

In meinem Fall machen wir Archive auf Band, und ich werde Ihnen sagen, warum es für uns sinnvoll ist.

Erstens ist die von uns verwendete Software Tivoli Storage Manager zweifellos die Software, die wir auf absehbare Zeit verwenden werden. Meiner Meinung nach ist TSM die Spitze der Nahrungskette in Bezug auf Enterprise-Backup-Software, daher besteht für uns das Problem des Wechsels zu einer anderen Softwareplattform relativ wenig.

Davon abgesehen unterhalten wir einige Langzeitarchive, und wir haben verschiedene Möglichkeiten, dies zu tun. Zum Glück verwenden wir einige der neuesten Bandtechnologien, die mehr als 1 TB pro Kassette speichern können. Daher ist es kein Problem, eine große Anzahl von Archiven in der Bibliothek zu haben.

• Archivieren Sie auf lokalen Bändern und kopieren Sie diese Archive in unser alternatives Rechenzentrum, wobei sich die Archivbänder in der Bandbibliothek befinden.

Wir tun dies für bestimmte Datentypen, da die Daten regelmäßig wiederhergestellt werden und wichtig genug sind, um zwei Kopien zu erfordern.

• Archivieren Sie auf lokalen Bändern, jedoch nicht auf Remote-Bändern, und lassen Sie die Bänder in der Bibliothek.

Wir tun dies für etwas weniger wichtige Daten, die regelmäßig wiederhergestellt werden müssen.

• Archivieren Sie auf lokalem Band und senden Sie sie zur Speicherung außerhalb des Standorts.

Die oben genannten Praktiken haben in der Vergangenheit für uns ziemlich gut funktioniert. Wir sind vor ein paar Jahren auf eine völlig andere Bandtechnologie umgestiegen, und es war ein bisschen Arbeit, die Daten zu verschieben, aber es war wirklich keine große Sache. In TSM war es buchstäblich ein Befehl pro Server für Archive, und er wurde ausgeführt. Es könnte ein paar Tage dauern, bis es läuft, aber es war für niemanden eine aktive Arbeit.

Die Welle der Zukunft ist jedoch offensichtlich der festplattenbasierte Speicher.

Sobald sich die Gelegenheit ergibt, werde ich ein Festplattenarray in einem sicheren Speicher zusammenstellen und Archive vom Typ Langzeitüberwachung auf ein solches Gerät kopieren.

Zwei EMC Centera-Installationen (gespiegelt von verschiedenen Standorten). Es kostet viel Geld, aber es funktioniert.

http://www.emc.com/products/family/emc-centera-family.htm

Sie können sich auch eine Lösung wie Data Domain (jetzt NetApp) ansehen . Sie archivieren und führen eine erweiterte Komprimierung durch, die sie DeDupe nennen, wobei sie nach ähnlichen Datenfehlern suchen und sehr hohe Komprimierungsraten erzielen.

Welche Art von Daten möchten Sie sichern? Sind das alles "zufällige" Daten wie Video oder Musik? Oder sind es Daten, die sich für eine Komprimierung eignen könnten?

Fahren Sie mit der neuen Archivierungslösung fort und bewahren Sie die Bänder so lange auf, wie Sie diese Daten benötigen. Wenn Sie es dauerhaft benötigen, können Sie es auf die Festplatte migrieren. Mit Festplattensicherungen ist die Migration auf zukünftige Medien erheblich einfacher.

In einem Jahr oder vielleicht in zwei Jahren können Sie damit beginnen, Bänder zu ignorieren, wenn diese Sicherungen nicht mehr benötigt werden.

Die Neuimplementierung ist ein großes Unterfangen, wenn die Zeit Ihr Problem für Sie löst. Führen Sie die Kostenanalyse durch, wenn Sie Kosten für das Speichern der Sicherungen und / oder der Softwarelizenzen haben, um mit diesen zu arbeiten.

Ihr Problem bei der Datenarchivierung, um Ihr Rätsel zu vereinfachen, scheint die zukünftige Kompatibilität alter Bänder mit neuer Hardware zu sein.

Meine Lösung: Wählen Sie nur einen Anbieter mit einer vollständigen Lösung (Software und Hardware), von der Sie vertrauen, dass sie ihr Bestes tut, um Legacy-Kompatibilität zu bieten.

Und natürlich einen sehr guten Preisvertrag bekommen, wenn man deine Treue berücksichtigt;)