Server/Backupsystem so ok?

[paze86]

Hallo Leute, ich brauche Eure Hilfe!

Ich versuche mich kurz zu halten, aber hole dennoch aus um zu erklären worum es geht:
Ich arbeite als Hobby-Fotograf und habe unmengen an Bilddaten. Ich besitze bereits einen selbstzusammengestellten "Server" der nun etwas betagt ist und überlege, wie ich das zukünftig am Besten handhabe.

Der jetztige Server läuft mit einem Softwareraid (Asus P5Q) auf Windows XP Server.
Bisher war es so, dass ich die Daten auf dem Rechenknecht (Win 10 pro) habe und vor dem runterfahren manuell auf den Server kopiere als Ablage/Sicherung (daher Raid 5). Von da aus kann ich auf verschiedenen Systemen im Netzwerk zugreifen.

Was ich nicht bedacht / gewusst hatte damals, dass die Transferraten extrem langsam sind (etwa 15Mb/s) was bei Ordnern mit mehrern 100 GB Daten einfach ewig dauert und das bisherige System uneffizient macht (Damals nachgelesen, liegt wohl an der Performance Softwareraid und der schwachen CeleronCPU die ich benutze).

Da nun der Speicher fast voll ist (5x 1 TB verbaut, ~4TB effektiv, 80GB Bootplatte), soll diese "Abteilung" neu gemacht werden.

Die bisherige Idee:
Den Server behalten allerdings das Raid auflösen.Vvon der Bootplatte abgesehen, mit vorerst 2x 4TB Platten zu versehen und auf externen Festplatten zu spiegeln (2x 4TB).
Wieso? Nun wenn ich überlege was damals eine 1 TB Platte gekostet hat, denke ich macht es Sinn die Festplatten nach und nach zu erweitern, so wie Sie benötigt werden, zumal Festplatten über die Zeit immer günstiger wurden/werden.

Die vorhandenen 1TB Platten würden die ganz alten Daten begraben (gespiegelt) und nurnoch im Gehäuse verbaut bleiben bzw. eine daheim. Nurnoch angeschlossen, falls wirklich nochmals benötigt. Das eigentliche Problem sind ja die nur 6 SATA plätze. Durch eine USB 3.0 Karte mit 5 Steckplätzen könnte ich das angehen, da mit den Spiegelungen 10 Platten angeschlossen werden könnten.
Wieso keine SATA erweiterung?
Externe hätten zusätzlich den Vorteil, dass ich Sie auch mitnehmen kann, bzw. wenn die erste Platte komplett voll ist, daheim sichern kann.

Erstmal bis dahin: Macht das für Euch Sinn? gibts noch Verbesserungsvorschläge?

Falls das so gemacht werden kann, habe ich noch das Problem des inkrementiellen Backups. Ich habe mich öfter dabei erwischt, dass ich das Backup für ein paar Tage verschoben oder einfach vergessen habe.
Ich suche eine Lösung, bei der die Daten vom Arbeitsrechner auf den Server automatisch kopiert werden, aber so wie Ich sie auf dem Arbeitsrechner lösche, auf dem Server erhalten bleiben!
Zudem soll das Backup für die eingebaute Festplatte auf die externe Festplatte inkrementiell automatisch statt finden.
Utopie?
Mit welchem Programm (günstig oder gar kostenlos?!?!) ist das machbar?
Ab und an arbeite ich auch mal von zuhause aus. Gibt es auch einen Weg aus dem Server eine Art NAS zu machen, die ich auch von daheim aus oder gar unterwegs anzapfen kann? Mit welchem Programm?
Bin am PC nicht unbedarft, aber zum Crack reicht es dann doch nicht.

Ich danke erstmal fürs lesen und freue mich auf Eure Beiträge!

lg paze86

 

[Schwabe66]

Backup: Veeam Endpoint Backup Free, sichert automatisch inkrementell wenn die externe angeschlossen wird oder nach Plan. Einfache Wiederherstellung der Daten möglich.

Zum Rest kann ich dir leider nicht viel sagen.

EDIT: Backup kann verschlüsselt werden da mein nachfolgender Poster ja , berechtigterweise, Angst um seine Daten hat

 

[RalphS]

Würde die alten Platten aufs neue RAIDset übertragen und dann irgendwo archivieren.

Für das RAIDset idealerweise einen dedizierten Controller. Das entlastet das System ungemein; gilt übrigens auch für RAID5 (sinnvolle Controller, die das unterstützen, sind aber vergleichsweise teuer).

Extern = nicht besonders gut, die Idee. Daten dort leben gefährlicher als anderswo.

Je nach Budget wäre ggf ein Bandlaufwerk eine Idee.

Server mit Backups drauf extern verfügbar machen = Ganz Schlechte Idee(tm). Nicht machen.

 

[Schwabe66]

Ich suche eine Lösung, bei der die Daten vom Arbeitsrechner auf den Server automatisch kopiert werden, aber so wie Ich sie auf dem Arbeitsrechner lösche, auf dem Server erhalten bleiben!

lg paze86

Robocopy Script wird dir da helfen.

Netzlaufwerk auf dem Server freigeben und beim Client einbinden, logoff Robocopy Script erstellen oder manuell ausführen. KEIN MIRROR Befehl verwenden!

https://technet.microsoft.com/de-de/library/cc733145(v=ws.10).aspx

Beispiel: robocopy C:/Bilder \\Serverfreigabe

Falls du da genauere Fragen zu hast kannst du mir gerne eine PN schreiben.

 

[Tronix]

Extern = nicht besonders gut, die Idee. Daten dort leben gefährlicher als anderswo.

Externes Backup ist gefährlich? Das müsstest mir mal bitte erklären...

Ich persönlich würde in dem Fall auch von RAID Abstand nehmen. Und warum 2x 4TB? 8TB intern, und 8TB Extern über USB 3.0, lediglich bei Bedarf zum sichern angeklemmt. Die 1TB Platten komplett ausmustern. Brauchen nur unnötig Strom, sind langsam und haben wahrscheinlich allesamt schon >50.000 Stunden auf den Buckel...

 

[Schwabe66]

Sofern das BU nicht verschlüsselt ist gebe ich ihm Recht, wenn die Platte geklaut wird = Daten in fremden Händen und wir wissen wohl alle das mit Physischem Zugriff auf die Daten diese ohne Probleme erreicht werden können (Sofern es sich um ein Windows System handelt).

 

[paze86]

Danke erstmal für die schnellen Antworten.

@Schwabe66: werd ich mir anschauen, Danke. Das Problem ist, dass es viele Backupprogramme gibt, allerdings, wenn wirklich mal das BU gebraucht wird, auch viele versagen.
Daher ist dahingehend eher die Frage, welches (ob überhaupt) kostenlose Programm da wirklich zuverlässig arbeitet. Hast du Erfahrungen mit Veeam gerade was das einspielen angeht? Früher hatte ich Acronis WD edition, da hatte ich ein gutes Gefühl, will mich aber nicht darauf verlassen müssen nur WD Platten zu benutzen.
Dein Angebot bezüglich Robocopy-hilfe komme ich am Ende der Woche gerne drauf zurück.

@RalphS
Die Idee das Raid aufzulösen kommt ja daher, dass das Softwareraid eigentlich ziemlich doof ist wenn wirklich mal was ist und "echte" Raidkontroller einiges verschlingen. Wenn man überlegt, dass viele Fotografen die Bilder einfach irgendwo in einer kostenlosen Cloud speichern, möchte ich dafür so wenig wie nötig investieren. Allerdings bringe ich es auch nicht übers Herz, sämtliche alten Bilder einfach mal zu löschen, steckt da doch auch einiges an Arbeit drin. Verstehst du das Dilemma?
... mich an Bänder ranzuwagen schließe ich auch eher aus.

@Tronix
Ja das klingt nach dem was ich vorhabe.
2x 4TB, damit ich die Platten einzeln Spiegeln kann. Eine 8TB und ne 8TB extern... Naja stimmt schon, ist eigentlich schicker, aber auch teurer. Ja Betriebsstunden haben Sie schon einige, daher könnte man die 1TB´s langsam ausmustern.
Ich vermute das RalphS meint, das externe Platten schneller mal um- oder runterfallen etc. Falls es das ist kann ich RalphS jedoch beruhigen, Sie würden definitiv sicher stehen (evtl. sogar mit im Gehäuse, da ist noch Platz. Es geht mir nur darum, das ich so (günstig) mehr Festplattenanschlüsse bekomme, nur anschließen kann wenn ich Sie benötige oder eben auch mit nach Hause nehmen wenn Sie voll sind.

 

[Schwabe66]

Veeam ist der führende Hersteller am Markt und bietet sogar VOLLEN Support für seine Free Produkte an. Ich verkaufe meinen Kunden nur Veeam, 100 mal einfacher und zuverlässiger als alles was sonst verfügbar ist.

Sie sind normalerweise nur in der Virtualisierung unterwegs um auch Physische Systeme sichern zu können haben sie das Produkt Veeam Endpoint Backup erschaffen, sofern du Datenbanken sichern möchtest und einzelne Dateien innerhalb der Datenbank wiederherstellen möchtest z.B. bei Exchange einzelne Mails, benötigst du eine Lizenz. Alles andere kann auch in der Freeversion wiederhergestellt werden, Datenbanken auch aber nur voll.

 

[snaxilian]

Okay, bevor du auch nur ansatzweise darüber nachdenkst wie du aus dem Internet an die Daten ran kommst oder so sichern kannst solltest du den "XP Server" abschalten bzw ablösen.

Dass man zwingend für ein Raid 5 einen eigenen Controller benötigt ist Käse. Naja vielleicht unter Windows oder im Vergleich zu diesen Pseudo-Raid-Lösungen per Mainboard. Habe div. Systeme mit mdadm und Raid 5 am laufen und der Flaschenhals ist dort die 1 GBit Anbindung nicht die Platten zumindest beim ablegen und lesen von Dateien. Früher einmal waren dedizierte Controller sinnvoll für mehr Performance bzw im Enterprise Serverumfeld ist es dies nach wie vor je nach Anwendungsfall.

@Schwabe66: Veeam hätte ich auch empfohlen aber wenn ich den TE richtig verstanden habe will er die Bilder auch auf dem "Server" behalten wenn er die Daten vom PC gelöscht hat. Veeam würde nach Ablauf der Retention diese auch aus dem Backup entfernen. Dafür wäre das erwähnte Robocopy sinnvoller.

Was ich machen würde: Ein 2Bay NAS kaufen mit USB 3.0 Anschluss, z.B. von QNAP oder Synology. 6 oder 8 TB Platte rein und sofern du die Daten auch bei Ausfall der Platte verfügbar benötigst eben 2 Platten rein und als Raid 1 konfigurieren. 2x Shares anlegen (fotos und backup) mit je unterschiedlichen Benutzern, die schreibend Zugriff haben (user_1 und user_2) und für den fotos Share noch einen lesenden User.
Im Robocopy Script die Kopie der Fotos auf den fotos Share einrichten mit Angabe des Nutzers damit die Fotos auf dem NAS archiviert werden können. Diese Freigabe kannst mit dem lesenden User auch einbinden um Zugriff auf die Daten zu haben.

Zusätzlich den eigenen PC regelmäßig sichern, z.B. mit Veeam auf den backup Share und dem dafür angelegten User mit Schreibrechten.

Zusätzlich besorgst dir eine externe USB 3.0 Festplatte mit gleicher Kapazität und richtest eine verschlüsselte(!) Sicherung des NAS auf diese Platte ein sobald diese eingesteckt wird. So sicherst du dann z.B. einmal wöchentlich das gesamte NAS und bewahrst diese externe Platte woanders auf, im besten Fall im sogenannten anderen Brandabschnitt.

Ja, das ist mit etwas Aufwand verbunden aber das ist ein brauchbares Backup Konzept, das deine Backups und Fotos gegen Cryptotrojaner absichert, da auf die beiden Shares nur Robocopy und Veeam drauf zugreifen können und nicht du selbst.

 

[Schwabe66]

Ich hab es so verstanden das es sich dabei um zwei verschiedene Probleme handelt,unabhängig voneinander.

Insofern fürs kopieren der Daten: Robocopy
Backup: Veeam

Wenn ich das falsch verstanden haben sollte, wird Veeam dein Problem nicht lösen da es sich um eine reine Backup Lösung handelt und kein Dateimanagement System.

 

[RalphS]

Externes Backup ist natürlich kein Käse. Da hab ich tatsächlich etwas zuviel weggelassen.

Was ich meinte war "externe Festplatten". Die sind in ihren externen Gehäusen weniger gut geschützt als zB in einem NAS-Gehäuse oder irgendeinem Zweit-System.

 

[Schwabe66]

Naja mit dem richtigen Gehäuse geht das auf jeden Fall, gerade für diesen Einsatzzweck.

 

[chrigu]

mein tipp: verabschiede dich vom xp-rechner und kauf ein NAS.
vorteile: neuster stand der technik, alles fixfertig, recht sicher, zusätzliche "backup"tools für cloud oder externe-HD, von aussen mit vpn und integriertem ddns überall erreichbar.
nachteil: kostet.

 

[paze86]

Guten Morgen,

@schwabe66
ok das ist eine Aussage, die Ich so annehme. Dann werde ich auf Veeam setzen.

@snaxilian
Es ist klar, dass ich nicht weiter auf Windows XP Server setzen werde. Die Geschichte mit dem Internet ist dann auch zum Schluss eher so ein Nice to have Ding. Wichtiger ist mir erstmal, dass die Datensicherung sauber funktioniert und ich da erstmal wieder etwas Ruhe habe für möglichst lange Zeit.

@chrigu
An eine NAS habe ich auch schon gedacht. Das Problem das ich damit habe, ist die nicht Erweiterbarkeit. Wenn ich eine 2Bay nehme mit 8TB ist die auch wieder in etwas 1-2 Jahren voll. Dann fange ich wieder von Vorne an, die Bilddaten werden ja auch immer größer. Ich möchte nicht in 6 Jahren 3 NAS dastehen haben.
Oder ich brauche eine mit 4,6,8 FB-Aufnahmen, die sind aber auf einen ganzen Schlag teurer. Daher war die Überlegung, beim jetztigen Server einfach Windows 10 Pro aufzuspielen, oder wenn es Sinn macht Server 2016 aufzuspielen. Das wäre dann meine NAS sozusagen, nur das ich eben 6 Festplattenanschlüsse habe, nach und nach erweitern kann und ebenso extern Speichern.
Mag am anfang etwas mehr aufwand sein das händich einzustellen was NAS heute schon mitliefern, aber er ist halt auch schon vorhanden und könnte so weitergenutzt werden. Einen Wechselrahmen zukünftig zu installieren ist ja auch nicht das Problem. Ich glaube das ich damit zükünftig einfach besser fahre als mit einer 2BayNAS.


Da es irgendwie unklarheit gibt was ich genau möchte:
Ich möchte zukünftig meine Bilddaten "automatisch" auf den Server übertragen bekommen (beim Runterfahren oder wie auch immer). Sofern ich die Bilder aber auf dem Arbeitsvolume lösche (Platz für neue Bilder) diese auf dem Server erhalten bleiben! Züsätzlich sollen die Bilder auf dem Datenserver gespiegelt sein. Das ist die grundlegende Idee.

Der Hintergedanke ist folgender:
Die Bilder die sich in bearbeitung befinden sollen wo anders gespiegelt sein, dass falls der ArbeitsPC ausfällt diese noch erhalten sind und auf einem anderen PC bearbeitet werden können (daher die Idee mit Internetzugriff falls möglich). Wenn die Bilder verarbeitet sind, können diese in einem Datengrab verschwinden da Sie nurnoch selten bis garnicht mehr benötigt werden.

 

[chrigu]

naja, 6 jahre alte bilder, die seit 6 jahren nicht angeschaut oder benutzt werden, kann man auf einen stick kopieren und für neues platz schaffen.
es gibt auch gute 6bay nas, etwas teurer aber immer noch besser als ein pc, oder festplatten-erweiterungen zum jeweiligen 2bay nas

 

[paze86]

... der Stick bräuchte stand jetzt 3,8TB größe!

 

[chrigu]

aha, also ein fortgeschrittener bildermessy

gibt auch externe festplatten...

 

[Schwabe66]

Bau dir nen billigen Rechner zusammen, hau die gewünschte Anzahl an Platten rein und mach das was ich oben beschrieben hab. Fertig.

 

[xamoel]

Wie wäre es mit einem NAS? Synology/QNAP whatever?

 

[paze86]

Bau dir nen billigen Rechner zusammen, hau die gewünschte Anzahl an Platten rein und mach das was ich oben beschrieben hab. Fertig.

genau das wird es werden.
Ich werde am Wochenende berichten, bzw. mich hier melden bezüglich der Configuration. Bis dahin sollten die Platten da sein und da habe ich die nötige Zeit.

aha, also ein fortgeschrittener bildermessy

ja das trifft es ganz gut! naja mache schon viele Bilder, sind auch große Videos dabei. Und mit RAWdaten bei 48Megapixel addiert sich das eben sehr schnell.