Datenträger - Festplatten, SSDs, Speichersticks und -Karten, CD/ 19.551 Themen, 109.635 Beiträge

Verfolgung starten Optionen

Prüfung alter Datenbestände auf Fehlerfreiheit

mawe2 / 23 Antworten / Flachansicht Nickles

Auf einer älteren Festplatte (HDD) liegt eine größere Datenmenge (100.000 Dateien unterschiedlichster Größen) vor.

Die Platte wurde schon viele Jahre nicht genutzt.

Möglicherweise sind durch die längere Lagerung (ohne regelmäßige Inbetriebnahme!) Fehler entstanden, so dass einzelne (oder auch viele) Dateien nicht mehr nutzbar sind.

Eine AdHoc-Prüfung ist für mich nur stichprobenartig möglich. Wenn ich 20 Dateien geöffnet und kontrolliert habe, lässt das aber noch keine Rückschlüsse auf die Unversehrtheit der restlichen 99.980 Dateien zu.

Wie lässt sich dieser Datenbestand auf einfachem Wege überprüfen?

Wie finde ich heraus, welche der 100.000 Dateien fehlerfrei sind und bei welchen Dateien Fehler vorliegen?

Die Prüfung sollte auf einem Windows-System erfolgen.
(Wenn es dort keine erfolgversprechenden Methoden dafür gibt, wäre aber auch der Einsatz anderer Betriebssysteme für diesen Zweck denkbar.)

Gruß, mawe2

bei Antwort benachrichtigen
Eine Prüfung der Daten wird sich am Dateisystem orientieren. Welches wird verwendet? A andy11
Da die Frage allgemeiner Natur ist, sollten die bei Windows gängigen Dateisysteme der letzten 30 Jahre relevant sein. ... mawe2
Hallo mawe2, Dann bleibt ja wohl m. E. nur die Kontrolle, ob die Dateien als solche noch in Ordnung sind. Ich würde als ... dirk1962
Du könntest dir von der Platte eine Hash Summe erstellen lassen und diese regelmäßig prüfen. Siehe: ... Wiesner
Danke. Aber da das regelmäßig vorher nicht gemacht wird, steht diese Hash Summe eben nicht zur Verfügung. mawe2
Das hatte ich auch so vermutet. Die Idee, alles auf eine andere Platte zu kopieren, ist auch nicht schlecht. Ob ein ... mawe2
Kannst Du in vielen Fällen gar nicht herausfinden ohne eine manuelle Prüfung: Überall dort wo beliebige Binärdaten ... Borlander
Vielen Dank für die ausführliche Antwort! Das dachte ich mir bereits. Insofern sollte man solche Aussagen wie habe nach n ... mawe2
Dazu habe ich in einem anderen Thread auch schon was geschrieben - aber mawe hat mir gegenüber behauptet, dass der ... winnigorny1
Gar nichts wurde bestätigt! Borlander bezog sich darauf, dass ECC-Speicher helfen kann, VORHER also vor der langjährigen ... mawe2
OK - verstanden.... Aber immerhin werden beim Speichern die Fehlermöglichkeiten reduziert. Und ich lasse meine HDDs nicht ... winnigorny1
Ja. Aber hier im Thread ging es eben genau um solche um Platten, die lange ungenutzt rumlagen . Ich weiß auch, dass man ... mawe2
Wenn die in Gesamtbetrachtung billiger sind und innerhalb der Spezifikation zzgl. Toleranz zuverlässig funktionieren, ... Borlander
Imho prüft jede Platte die Daten über CRC und darüber wird auch ein Dateisystemcheck angeworfen, wenn etwas nicht ... gelöscht_189916
Ich bin immer davon ausgegangen, dass CRC bei der Übertragung von Daten wirksam wird. Wenn die Platte 20 Jahre im Schrank ... mawe2
Auch beim Speichern selber. Das Verfahren wird ja auch bei DVD usw. angewendet. Da Lesen eines Datenträgers ja auch ein ... gelöscht_189916
Aber genau dazu wollte ich ja eine Aussage treffen... Es bleibt schwierig. mawe2
CRC ist doch bereist eine Prüfsumme?! Jein. Eine vergleichsweise kurze Prüfsumme bietet keine absolute Sicherheit über ... Borlander
gelöscht_189916 Borlander „CRC ist doch bereist eine Prüfsumme?! Jein. Eine vergleichsweise kurze Prüfsumme bietet keine absolute Sicherheit über ...“
Optionen
CRC ist doch bereist eine Prüfsumme?!


Die arbeitet doch m.E. aber dateiweise?

Für die Integrität der gesamten Platte ist das also nur bedingt aussagefähig. CRC-Fehler wären jedoch ein Indiz für Plattenprobleme und umgekehrt für eine intakte Platte, wenn es keine gibt.

Letzten Endes sind wie die nicht korrigierbaren Sektoren auch solche Dateifehler eine Frage der Wahrscheinlichkeiten. Dabei geht es ja nicht darum, ob sie auftreten, sondern wann und wie oft.

Frage 2 wäre dann, ob diese z.B. aus der Prüfsumme heraus korrigiert werden können oder nicht (mehr) und damit bei jedem weiteren Zugriff weiter beschädigt werden oder eben nach einer Korrektur zwar verändert, aber dann wieder "unbeschädigt" gespeichert sind, weil Datei plus Prüfsumme integer sind und ein neuerliches Abgleichen und ggf. Wiederherstellen zulassen.

Sonst müsste man für absolute Datensicherheit ständig mehrere Datensätze identisch vorhalten und diese permanent prüfen, um im Schadensfall diesen aus einem Double wieder herstellen zu können.

Im Prinzip ist das wie mit einem Bild, welches bei einem fehlenden Pixel noch als solches erkannt wird und man zumindest mit hoher Wahrscheinlichkeit auf die Farbe/den Zustand des fehlenden Pixels rückschließen kann, welches aber bei zu vielen fehlenden Pixeln seinen "Informationsgehalt" verliert. Auch ein Buch/Text kann bei einzelnen fehlenden Buchstaben "logisch" wieder rekapituliert werden, bei fehlenden Seiten oder Worten aber ab einem gewissen Punkt ohne einen identischen zweiten Satz nicht mehr.

Absolute Sicherheit kann es ergo ab einem Datenbestand der Größe X verbunden mit dem Faktor Zeit gar nicht mehr geben oder man hat mindestens 2x gesichert und gliche ständig ab. Und selbst da kann ein Fehler eines Teils die korrekte Datei verfälschen. Letzten Endes weiß man dann selbst bei inkorrekter Prüfsumme wieder nur, dass etwas falsch ist, aber erst einmal nicht wo oder was. Darauf kann dann über CRC z.B. die einzelne Datei ausfindig gemacht werden, wobei eben auch das nur bedingt Sicherheit bringt.

Das CRC-Verfahren ist nur für die Erkennung von zufälligen Fehlern ausgelegt. Es ist nicht geeignet, die Integrität der Daten zu bestätigen. Das heißt, es ist verhältnismäßig leicht, durch beabsichtigte Modifikation einen Datenstrom zu erzeugen, der den gleichen CRC-Wert wie eine gegebene Nachricht hat. Wenn eine solche Sicherheit gefordert ist, müssen kryptografische Hash-Funktionen wie beispielsweise SHA oder Signatur-Funktionen wie beispielsweise RSA zum Einsatz kommen.


Für den heimischen Anwendungsfall würde ich daher CRC mit gegebener Reparaturfunktion und ggf. noch eine Prüfsumme des gesamten Datenträgers als ausreichend ansehen. Die Binse des gelegentlichen Umkopierens von gesicherten Datenbeständen kommt ja nicht von ungefähr.

Es bleibt schwierig.


Auf jeden Fall;-)

bei Antwort benachrichtigen
Checksummen können auf ganz unterschiedlichen Ebenen zum Einsatz kommen: Je Speicherwort im Arbeitsspeicher Beim Einsatz ... Borlander
Danke nochmal für alle Beiträge, die zum o.g. Thema gegeben wurden. Zusammenfassend nehme ich für mich mit, dass es ... mawe2
Schaut bei kürzerer Lagerzeit übrigens auch nicht sehr anders aus. Darüber macht man sich im Alltag nur wenig Gedanken, ... Borlander
Das stimmt natürlich auch. Aber auch ohne die konkreten Einflüsse wirklich genauer zu betrachten, dürfte doch die ... mawe2