Vergleich von Datensätzen mehrer HDDs - Software?

Registriert
Juni 2015
Beiträge
149
Guten Abend :)

Ich suche eine Software, die 2 oder besser 3 HDDs miteinander vergleichen kann.
Also ob die darauf befindlichen Daten identisch / unbeschädigt sind.

Im Prinzip müssen doch 3 Versionen miteinander verglichen werden, oder?
Wenn man A und B vergleicht und dabei Unterschiede festgestellt werden, weiß man ja nicht was von beidem richtig ist.

Die Software sollte eine graphische deutsche Benutzeroberfläche haben und muss auf Windows 7 laufen.
Sie darf auch Geld kosten, solange es das Geld wert ist und es nichts gleichgutes kostenlos gibt.
Die HDDs haben NTFS als Dateisystem.

Es gäbe auch Sicherungen auf BD / M-Disc die verglichen werden könnten, aber das ist kein muss, nur "schick" wenn es zusätzlich geht.
 
Zuletzt bearbeitet:
Ich verwende Beyond Compare, das CRC und Binärvergleich unterstützt.

Siehe Intelligent Comparison

ComputerBase Download


CaptainPicard24 schrieb:
Also ob die darauf befindlichen Daten identisch / unbeschädigt sind.
Hier hilft die zyklische Redundanzprüfung. Von wichtigen Daten wird ein Prüfwert für die Dateien erzeugt:

CD SUZANNE VEGA
56842a44e06738ef6a06c434e223ac937eda29909e5000d3fffbc22421948f56 *01. Cracking.wav
12b2a27bcb084106bad78c030de3000e5d10a02cfc52e1f662600b010e6328ae *02. Freeze Tag.wav
def345d9936f585b3806bce56b843d8fd031b81b3711988c9159b74a5241a0c8 *03. Marlene on the Wall.wav
db7396c2217f3f8ce6cfdd79354bdc969807ea07b93b11c2b6597668b5720b32 *04. Small Blue Thing.wav
5ae4a17b492c09773e775f6299aae235fb0575bb8ec8ecc9467776608b5244b0 *05. Straight Lines.wav
53b0bd1ca0371de071e9fec90ea060115dcc87fd7e71d86ab237d451f7111355 *06. Undertow.wav
4fa88098435788d08d16949e576f9e8a8b4fd84f2588877d0bddfea470d8f72a *07. Some Journey.wav
cada780bae06eace2468521a82629f95be05d6f1fb56f2de709b626f21691612 *08. The Queen and the Soldier.wav
a18169f13f6de2d41252cc35e9d9d8fa2a060dea952175461f80bb58921cb7d9 *09. Knight Moves.wav
2b016611752bf2ba7d21f97e3bc8d611a1bb0fde0166965984f8c543ace533d7 *10. Neighborhood Girls.wav
846c3709ea758c2427d59d5e758caec20fe4e29e6f5283cd262cc0878ed5f6b4 *cover front.jpg
 
Zuletzt bearbeitet: (Ergänzung; Präzisierung)
Ist FreeFileSync auch empfehlenswert?
Hat beyondcompare und Agent Ranksack deutsche Benutzeroberfläche?
 
CaptainPicard24 schrieb:
Hat beyondcompare und Agent Ranksack deutsche Benutzeroberfläche?
Download Beyond Compare 4

chinesisch, deutsch, englisch französisch, japanisch:

1608137414681.png



CaptainPicard24 schrieb:
Ist FreeFileSync auch empfehlenswert?
Habe es noch nicht verwendet, für den Vergleich ja, aber nach der Produktseite fehlt mir die Möglichkeit Bilder, Textdateien (CSV, JAVA, Text, HTML, XML, usw.) direkt vergleichen zu können, wie dies im Video gezeigt wird.
 
Zuletzt bearbeitet:
@demo4
Vielen Dank für die schnelle Antwort!

@Hauro
Vielen Dank für die schnelle Antwort!
Und wie erstellst du die Quersummen? Brauchen die viel Speicher, wenn man sie für tausende Dateien erstellt?

Ich werde mich in die beiden Programme einlesen.

Diese vergleichen also nur, ohne direkt Veränderungen vorzunehmen?
 
CaptainPicard24 schrieb:
Diese vergleichen also nur, ohne direkt Veränderungen vorzunehmen?
Ja, da alles andere ohne Interaktion oder Skript nicht durchführbar ist.

CaptainPicard24 schrieb:
Und wie erstellst du die Quersummen?
Mit dem zweiten lizenzierte Tool: Total Commander,

1608138647864.png


Für die CD z.B. so - der Ordner SUZANNE VEGA ist selektiert
1608138695485.png


Dann wird die Datei SUZANNE VEGA.sha256 mit den oberen Quersummen aus Beitrag #4 erzeugt. Dies funktioniert auch für alle selektierten Ordner unter Musik. Dann wird für jeden Ordner bzw. CD die Quersummen gebildet und eine Datei angelegt. Ist keine der 'Erzeuge ...' Checkbox ausgewählt, wird eine Quersummen-Datei für alle Dateien der ausgewählten Ordner unter Musik erzeugt.

Um die Quersummen zu überprüfen reicht ein Doppelklick auf die Datei, z.B. SUZANNE VEGA.sha256 - ups mit Fehler, habe die Quersumme noch nicht aktualisiert

1608139766211.png


das übrigens auch einen Dateivergleich hat:
1608138474390.png


Image gallery of Total Commander with the most important functions

Total Commander kann aber auch so verwendet werden, ich honoriere aber die Arbeit die in der Software steckt. Es gibt sicher auch kostenlose Software um Quersummen zu erzeugen und zu prüfen.

Ich verwende Total Commander seit zwanzig Jahren. da er im Gegensatz zum Windows Datei Explorer zwei Fenster hat und Tabs unterstützt - für mich eine Art Schweizer Taschenmesser.
1608138931964.png



Auch hier gibt es ein Replikat mit FreeCommander.
 
Zuletzt bearbeitet: (Ergänzung)
madmax2010 schrieb:
die checksummen brauchen wenige byte pro datei, wenn man sie persistent speichert
"persistere" = stehen bleiben, verharren, verharren auf
Was bedeutet das in Bezug auf das Speichern von Dateien?
 
CaptainPicard24 schrieb:
Was bedeutet das in Bezug auf das Speichern von Dateien?
Gemeint ist sicher die Größe der Quersummen-Datei:

SHA256-Datei
  • mit 16 Quersummen: 106 KB (109.309 Bytes)
  • mit 2.102 Quersummen: 308 KB (316.292 Bytes)
  • mit 3.713 Quersummen: 474 KB (485.913 Bytes)
 
und je größer die Zahl hinter SHA desto sicherer?
Speichert man die dann am besten nochmals getrennt, damit die Quersummen nicht mitbeschädigt werden?

Also das Programm würde dann für jede .jpg Datei eine eigene Quersummendatei erstellen, richtig?

Und wenn man Total Commander auch zum Synchronisieren nimmt, sind dann auch die Zeitstempel der Duplikate identisch? also Erstellungs-, Änderungs-, Zugriffsdatum?

Gibt es dafür auch eine deutsche Benutzeroberfläche?
Ergänzung ()

P.S. Wie groß schätzt du (@Hauro ) eigentlich die Gefahr ein, dass sich Daten auf HDDs / BDs bei halbwegs idealen Lagerbedingungen verändern?
(Die letzten 20 Jahre habe ich mangels Wissen darum ja auch nicht darauf geachtet und keine Probleme bemerkt)
 
Zuletzt bearbeitet:
CaptainPicard24 schrieb:
und je größer die Zahl hinter SHA desto sicherer?
Die Zahl gibt die Länge des Hash-Werts (in Bit) an. Für die Überprüfung reicht SHA-256 aus, wie sie auch von VirusTotal verwendet wird.

Beispiel CrystalDiskInfo8_9_0.zip

MD50a360d8475c8e11df774f515c52b9a8c
Vhashc6d6246a377c3ffab5f7449ae0fa33ec
SHA-160bc62487cfa7296ba6b2066b596232f823cde49
SHA-256ac9a5e353ca3fabb25f5190cca108e4b3fd5bb6e5261934fe9b07ef419844080

CaptainPicard24 schrieb:
Speichert man die dann am besten nochmals getrennt, damit die Quersummen nicht mitbeschädigt werden?
Sie sollten bei den zugehörigen Dateien gespeichert sein, sonst müssten sie jedes mal in die Ordner kopiert werden um die Dateien zu überprüfen. Wird die goldene Dreier-Regel (siehe unten) eingehalten, gibt es immer noch zwei weitere Kopien.
CaptainPicard24 schrieb:
Also das Programm würde dann für jede .jpg Datei eine eigene Quersummendatei erstellen, richtig?
Dies ist möglich, wäre mir zu mühsam. Ich habe eine Datei pro Ordner, z.b. bei CDs, DVDs, usw. und für die Kategorie, wie Bilder, Dokumente, Musik, Videos. Bei Großen Dateien - wie Videos - können mehrere Dateien sinnvoll sein, da die Verifikation bei einer Festplatte lange dauern kann, da dabei die Quersumme erneut gebildet und mit der gespeicherten Quersumme verglichen wird.

In periodischen Abständen überprüfe ich dann die Quersummen pro Kategorie.
CaptainPicard24 schrieb:
Und wenn man Total Commander auch zum Synchronisieren nimmt, sind dann auch die Zeitstempel der Duplikate identisch? also Erstellungs-, Änderungs-, Zugriffsdatum?
Total Commander kopiert wie andere Tools 1:1. Beim Datum kann es durch die Sommerzeit zu Abweichungen kommen, daher kann die Zeit ignoriert werden:

Total Commander
1608148821085.png


Beyond Compare
1608148863637.png


CaptainPicard24 schrieb:
Gibt es dafür auch eine deutsche Benutzeroberfläche?
1608149006569.png


日本語 müsste hinzugefügt werden,

CaptainPicard24 schrieb:
P.S. Wie groß schätzt du (@Hauro ) eigentlich die Gefahr ein, dass sich Daten auf HDDs / BDs bei halbwegs idealen Lagerbedingungen verändern?
(Die letzten 20 Jahre habe ich mangels Wissen darum ja auch nicht darauf geachtet und keine Probleme bemerkt)
Es gibt keine Sicherheit, daher gilt es immer ein Backup vom Backup zu haben. Ich zitiere mich mal selbst:

Datensicherung (Backup)

Sicherheit
  • Medium nur für das Backup anschließen.
    Schadsoftware / Malware kann alle angeschlossenen Datenträger befallen. Daher die Daten immer auf einen externen Datenträger sichern, der nur für das Backup angeschlossen wird.
  • Falls Wert auf Ausfallsicherheit gelegt wird, sollte mehr als ein Medium verwendet werden - es gilt immer ein Backup vom Backup zu haben. Das Backup / Archiv in regelmäßigem Abstand überprüfen (Quersumme, z.B. zyklische Redundanzprüfung (CRC)) und bei langer Lagerung auf einen anderem Datenträger kopieren. Das Backup sollte dem Änderungsrhythmus der Datei entsprechen.
Grundlagen des Backups / der Archivierung:
  1. „Die goldene 3er Regel“ - Immer 3 Kopien der Daten anlegen: Eine Arbeitskopie, ein Backup und ein Backup des Backups – letzteres am besten an einem anderen Ort, falls das erstes Backup durch Brand oder andere Gefahren zerstört wird.
  2. Ein Dateisystem oder Format verwenden, das sicherlich auch in einigen Jahren noch lesbar sein wird, wie FAT, NTFS, usw. Wenn auf Komprimierung nicht verzichten werden kann, ein universelles Format wie ZIP wählen.
  3. Finger weg von speziellen Dateiformaten. Stattdessen auf PDF/A, RTF, JPG, MPEG, usw. setzen, die sicher auch noch in Zukunft lesbar sein werden.
  4. Keine Verschlüsselung verwenden – außer für sehr sensible Daten. Passwörter können verloren gehen oder vergessen werden oder die Anwendung gibt es nicht mehr oder kann nicht mehr ausgeführt werden. Es geht bei der Archivierung um eine wirklich lange Zeitspanne.
  5. Das Medium so genau wie möglich benennen - Vermeidung der Speicherung der gleichen Daten in einem weiteren Backup.
  6. Optional: Das Archiv datieren und dokumentieren.
  7. Optional: Schreibgeschützte Kopie auf dem wieder beschreibbaren Medium speichern - Verringerung die Gefahr eines versehentlichen Überschreibens.
  8. Auf sich verändernde Technologie achten. Nur weil das gewählte Archivmedium 1000 Jahre halten soll, heißt das nicht, dass es dann auch noch Geräte gibt, um es auszulesen.
 
Zuletzt bearbeitet:
@Hauro
Ich danke nochmals für alle Antworten! Die goldene 3er Regel oder auch 3-2-1 ist bekannt, die übertreffe ich sogar jetzt schon.

Ich werde Zeit brauchen alle eure Beiträge gründlich zu studieren und mich in die Programme einzulesen / auszuprobieren. Danke bis hierher nochmals! Das wird sicher einige Tage / Wochen brauchen.
 
noch eine doofe Nachfrage:

da ich bis jetzt immer ohne Checksummen gearbeitet habe.

Muss man nicht 3 Sicherungen vergleichen? (Ich habe ja auch 4 Stück)
Wenn bei 2 Sicherungen eine davon abweicht, weiß man ja nicht, welche "falsch" ist?

Oder ist der Gedanke Unsinn?
 
CaptainPicard24 schrieb:
Muss man nicht 3 Sicherungen vergleichen?
Die Quersumme bzw. Prüfsumme wird vom Original gebildet und dagegen geprüft.

Würde die Quersumme bzw. Prüfsumme einmal von der Arbeitskopie bilden und gegen diese prüfen. Weicht eine Kopie bei der Überprüfung ab, würde ich gegen eine andere Kopie prüfen. Sollte wieder erwarten auch diese abweichen, würde ich die Kopien vergleichen, sind die identisch liegt es wahrscheinlich an der Arbeitskopie. Bei einer Arbeitskopie und drei Datensicherungen sollt das Verhältnis 3:1 sein.

Abhängig vom Dateiformat / -typ kann bei einem Unterschied unterschiedlich verfahren werden. Einige Dateiformate / -typen, wie Bilder, Text, usw, können, z.B. mit Beyond Compare, direkt miteinander verglichen werden, bei anderen wird es schwieriger.
 
Zuletzt bearbeitet: (Ergänzung)
@Hauro
Ja, ich habe mich jetzt etwas reingearbeitet in die Programme. Scheinen sehr brauchbar zu sein.

Das "Original" gibt es bei (fast) allen Dateien schon sehr lange nicht mehr.
Kopie.....von kopie ...... von kopie...... von kopie. Schon viele Jahre. Da alles digital ist, sah ich da kein Problem.

Es geht um mehrere zehntausend Dateien. Händisch (also Bilder betrachten) kommt zeitlich nicht in Frage.

Ich hoffe du nimmst es mir nicht übel, dass ich zu meinem Verständnis nochmal nachfrage.
3 Festplatten, A, B, und C alle 6 TB groß, mit ca. 2,5 TB belegt.
Die Daten sollten - wenn nichts schief gelaufen ist - identisch sein.

Wie prüfe ich das jetzt?

Von jeder Festplatte und den einzelnen Ordnern Quersummen erstellen und dann immer drei A/B/C Quersummen miteinander vergleichen?

Oder erstelle ich die Quersumme nur von A und kopiere die Quersummen dann auf B und C und vergleiche sie dort mit den Dateien?

Ich danke dir!
 
CaptainPicard24 schrieb:
Oder erstelle ich die Quersumme nur von A und kopiere die Quersummen dann auf B und C und vergleiche sie dort mit den Dateien?
Korrekt, die Quersumme bzw. Prüfsumme wird einmal gebildet und dagegen geprüft.
 
Vielen Dank, das probiere ich morgen aus.
 
Zurück
Oben