NAS selber bauen: viel Leistung für wenig Geld

Stehe ich aufn Schlauch? Verstehe eure Abneigung zu Raid-1 nicht...
Wenn ich 2 Raid-1 habe dann hab ich 2 TB, meine wichtigsten sachen sind so 300 GB groß. Wenn ich ein Zeitversetztes Syncen von dem einen Raid zum anderen mache, hab ich doch pysikalisch meine wichtigsten Sache 4 mal gesichert. Was anderes als n Hdd-Hardware-Ausfall kann doch eh nicht passieren.

Es gibt verschiedene Ausfallzenarien, die man abfangen könnte.
Welche sinnvoll sind, kommt auf den persönlichen Fall an.

Viele User hier haben statische Daten, daher bietet sich anstatt einem Raid 1 oft ein Oflinebackup an, da hier mehr Ausfallzenarien abgefangen werden können.
Wenn Daten sich hingegen in hoher Frequenz ändern, ist ein offlinebackup in der Regel veraltet. Hier gibt es zahlreiche andere Methoden, um Daten zu sichern.

Die Frage ist erstmal primär, was für Daten habe ich, wie oft ändern sich diese und welche Ausfälle müssen abgefangen werden.
Im Ergebnis kann da auch ein Raid1 rauskommen....

Für die anderen kann und will ich nicht sprechen -- aus meiner Sicht verwendest Du ein RAID-1 für etwas, wofür es nicht gedacht ist. Du verschwendest damit nur Ressourcen (Platz und Verschleiß)

Was anderes als n Hdd-Hardware-Ausfall kann doch eh nicht passieren

Was machst Du bei einem Brand, wenn Du nur ein lokales Backup vorrätig hast?

promocore (Beitrag #553) schrieb:

Im Ergebnis kann da auch ein Raid1 rauskommen....

Ich sehe eigentlich nur zwei Szenarien, bei denen sich der Einsatz eines RAID-1 lohnt, (a) gespiegelte root-Partitionen, um den Boot-Vorgang zu beschleunigen und (b) Datenbank-Server. Und als Sonderfall (c) gespiegelte Write-Caches.

Oder bei einem Blitzschlag der das NAS grillt, oder einem Fehler im RAID Controller der die Daten auf den HDDs durcheinanderwürfelt? Oder wenn dir jemand das NAS klaut, dir der Fernseher oder ein Kasten Bier drauf fällt. Oder ...

RAID1 auf zwei Platten ist sicher keine schlechte Idee um einem Plattenausfall vorzubeugen, aber es sollte durch mindestens ein externes, regelmässiges Backup (also ausser Haus!) ergänzt werden. Eine USB Platte mit an dem Gerät als einzige Sicherung hilft bei Überspannung oder Diebstahl oder ... auch nicht.
Und bitte unbedingt an die Hardwareüberwachung denken, was nutzt dir ein RAID aus zwei Platten wenn du nicht mitbekommst das eine kaputt ist.
Ach ja, und unbedingt regelmässig die Sicherungen überprüfen, zumindest Stichproben nehmen ob alles gesichert wird, alles aktuell ist, und auch lesbar.

Klingt vielleicht paranoid, aber ich habe schon gestandene erwachsene Menschen weinen sehen als ihre Hochzeitsbilder oder die Fotos der Kinder weg waren.

Ciao, Daniel

Joabso ähnlich hab uch mirbdas vorgestellt, online die aller wichtigsten sacheb zu Backupen und ab und an ne externe ausm Schrank holen. Aber die Wahrscheinlichkeit eines Bramdes / Blitz halte ich für eher irrelevant. Die meisten Datenverluste hab ich erlebt durch HDD Tod.

Wenn Dein Haus abgebrannt ist, denkst Du anders.
Und ja, ich spreche aus eigener Erfahrung.

@dgar (Beitrag #556) schrieb:

Die meisten Datenverluste hab ich erlebt durch HDD Tod.

Die meisten Dinge im Haushalt gehen durch Unachtsamkeit oder schlicht durch Alterung kaputt. Trotzdem hast du vermutlich eine Hausratversicherung für Feuer, Wasser, etc für den Fall der Fälle oder?

Defekte Festplatten sind sicherlich für viele Datenverluste verantwortlich, aber unbeabsichtigtes Löschen tritt nach meiner Erfahrung wesentlich häufiger auf. Beruflich habe ich da recht viel mit zu tun, und ich schätze wir haben 5mal mehr Fälle bei denen wir angerufen werden um etwas versehentlich Gelöschtes wiederzuholen als das defekte Festplatten zu Verlusten führen.

Ciao, Daniel

Deswegen ja der Gedanke ein zeitversetztes syncen von einem "Spiegel-Raid" zu dem anderen, dann bin ich gegen versehentlich löschen und gegen Festplattenausfall abgesichert, und für Elementarschäden und Diebstahl sicher ich mich noch mit Onlinebackups ab.

Im Wesentlichen ist dazu alles gesagt. Es gibt zig Szenarien die dafür sprechen externe Speichermedien zu nutzen und mindestens eine Kopie außerhalb der eigenen vier Wände zu lagern. Wenn du einen Diebstahl, einen Wasserschaden, einen Blitzschlag, einen Kryptotrojaner, einen Bedienungsfehler oder ein defektes Netzteil für unwahrscheinlicher hältst als drei HDD Defekte auf einmal, dann mach das so wie von dir geplant. Ich würde das so nciht machen.

Kernfrage war ja eigentlich auch ob besser Software-Raid oder Hardware-Raid

Heutzutage immer Software, zumindest wenn du Linux oder BSD nutzt.

Ich würde in den meisten Fällen im Heimbereich zu einem Softwareraid raten, da is in der Regel leichter auf neue Systeme portiert werden kann.
Nimmt man bei dir z.B. ZFS, würde man damit das Raid bauen, hätte Snapshotfunktionalitäten(versehentliches löschen) und könnte mit zfs send direkt die Difs zum zweiten Raid syncen.

Uhm ... ich bin ja bekennender Fan von ZFS, aber ob das hier so eine gute Idee ist...

ZFS braucht viel RAM. Ext4 sollte doch auch gehen.

Ext4 hat nicht so schöne Feature.
Wenn RAM ein Thema ist, würde ich ehr auf Btrfs gehen, da hier das Dateisystem auch Snapshots kann.
Nachteil bei ext4 und Btrfs, für Raid braucht man dann wieder ein Hardwareraid oder einen weitere Software wie z.b. LVM für das Softwareraid.

Wenn man weiß, was man tut, kann man ZFS durchaus mit weniger als 1GB Ram laufen lassen.
Ob das Sinn macht, oder Spass, ist allerdings eine andere Frage.

Moin moin,
hab jetzt alles zusammen und Synology DSM 6 installierrt. Hab ich nun doch für ein Raid 5 emtschieden, ob ich dabei bleibe, ma sehen^^.

Ein paar Fragen hab ich abr noch,

sind 18 Watt ohne HDD i.O.?

WOL hab ich jeweils im BIOS und im DSM aktiviert, allerdings, nachdem DSM automatisch in Standby geht(hab 25 Minuten eingestellt) ist der PC komplett aus, also weder die LAN - LEDs leuchten noch ist der PC anpingbar. Folglich lässt er sich auch nicht starten. Hat da wer evtl. noch n Rat?

18W im Standby?

Wie, also auf welche Weise, versuchst Du, den Rechner wieder zu wecken?
Ein einfacher Zugriff per HTTP oder SMB genügt nicht.

Für Wake on LAN kannst du z.B. die DS Finder App von Synology nutzen, damit kannst du die Kiste aufwecken. Wie schon geschrieben geht das nicht per Ping oder anderweitigem Zugriff, WOL benötigt ein "magisches Paket" das dem Gerät gesendet wird.

Ciao, Daniel

Habs mit der Fritzbox versucht und ging nicht. Habe dann die Ursache gesucht und festgestellt dass der Lan Adapter anscheind komplett aus ist. Da weder die LEDs leuchten noch ist das NAS anpingbar. Wenigstens das sollte es aber doch sein...?

cbv (Beitrag #569) schrieb:

18W im Standby?

Nein im Betrieb während die, und nur die, HDDs im Standby sind. Mit allen 4 HDDs hab ich ca 38W

Welcher LAN Adapter? Wo hängt der dran, was macht der? Sind Fritzbox und NAS per LAN miteinander verbunden?

Ciao, Daniel

Natürlich. Fritzbox -> Aktiver Lan-Switsch(ja der is immer an)-> Nas.
Mit LAN-Adapter mein ich die Onboard Netzwerkkarte die selbstverständlich WOL beherrscht und aktiviert ist(im BIOS).

@dgar (Beitrag #571) schrieb:

cbv (Beitrag #569) schrieb: 18W im Standby? Nein im Betrieb während die, und nur die, HDDs im Standby sind. Mit allen 4 HDDs hab ich ca 38W

Darüber machst Du Dir Gedanken? Manche Rechner verbrauchen im Standby mehr...


Und bzgl WoL:
Ich lehne mich mal etwas weiter aus dem Fenster, und behaupte, dass Synology die Realtek RTL8111GR nicht nativ unterstüzt. Nimm eine Intel, ist sowieso besser, als der Murx von Realtek.

Versuch es mal ohne den Switch dazwischen, mancher günstiger ist nicht WoL fähig.
Die korrekte MAC Adresse des NAS hast du aber in der Fritzbox für WoL hinterlegt?

Ciao, Daniel

Es würde mich wundern, wenn das Problem nicht der Chipsatz von Realtek ist.
Sie sind brauchbar, um die Kiste aufzusetzen und für erste Tests im Netz, für täglichen Gebrauch sind sie unbrauchbar, weil einfach nicht zuverlässig genug. Nach meiner Erfahrung ist Realtek instabil und/oder langsam. Meistens eher beides, weshalb ich bei mir alle durch Karten von Intel ersetzt habe.

dan_oldb (Beitrag #575) schrieb:

Versuch es mal ohne den Switch dazwischen, mancher günstiger ist nicht WoL fähig. Die korrekte MAC Adresse des NAS hast du aber in der Fritzbox für WoL hinterlegt? Ciao, Daniel

Im WIF der Fritzbox brauch man keine Mac eintragen, die hat die Fritte eh hinterlegt. Habs aber auch nochmal mit der Sybology App DMS Find versucht, auch ohne Erfolg. Witzigerweise, obwohl nix anderes angeschlossen, blinkenken die LEDs am switch, also scheint Netzwerk mäßig doch was zu passieren.

Ich werde es nochmal ohne switch dazwischen testen, ansonsten soll ich echt ne andere Lan-Karte holen? Mann mann mann.

Hast Du niemanden, bei dem Du eine ausleihen kannst?

Leider nein, hab gerade mal etwas recherchiert, es kann auch am Netzteil liegen, die Frage is ob 18 Watt nich eh irrelevant sind...hmmm

Edit: Habs, ich Idiot, ich ärgere mich so über mich selber. Hab bei der Einrichtung des DMSs vergessen die reele physische MAC einzutragen und somit stand eine zufällige drin, somit stand im Web-If der Fritte auch immer diese zufällige. Das ich die dann nich wecken kann ist klar. Ohmann ey das hat wieder Zeit gekostet...

@cbv @dan_oldb danke trotzdem für eure Muhen mir zu helfen.

Aber ein klassisches Backup, beispielsweise auf eine getrennte Platte per rsync, machst Du jetzt nicht?

@roger23 so weit bin ich eigentlich noch garnicht, da ich mir auch noch nicht sicher bin ob das Raid5 die finale setting ist.
Im grunde genommen will ich eigentlich nur ca 200-300 Gb von meinem Lappy aus und die Bilder von meinem Handys aus "Backupen". Und um einen Festplattenausfall entgegenzuwirken wa die Idee n Raid zu machen. Mittlerweile hab ich aber bedenken ob die Sache mit Raid nicht eigentlich zu kompliziert ist, ich könnte ja eigentlich auch einen geplanten sync von einer HDD zur anderen machen, dann hab ich wahrscheinlich weniger Arbeit falls dann wirklich eine ausfällt. Denn wenn eine HDD in nem Raid5 Verbund ausfällt dauert das rebuilding, wie ich gelesen habe, auch ewig.

OK. Ich muss mir angewöhnen, zuerst immer einen PEBKAC in Erwägung zu ziehen...
Ist ja jetzt nicht so, dass der alte Dan nicht nachgefragt hätte, ob die korrekte MAC eingetragen ist
*duck*

Ich bleibe trotzdem bei meiner Aussage: Früher oder später wirst Du die Realtek verfluchen.


Die Dauer des Rebuild hängt von verschiedenen Faktoren ab. Optimistische Faustregel: Kapazität / Transferrate = Dauer
Dazu kommt, dass während des Rebuild die Platten permanent unter Last laufen, kommen mehrere oder alle Platten aus der selben Charce, ist daher die Wahrscheinlichkeit groß, dass noch weitere ausfallen können. Man sollte sich ein Rebuild ohne Spare also gut überlegen.

Warum dann trotzdem ein RAID?
Weil Du trotz Ausfalls einer (oder je nach Setup, mehrerer) Platten trotzdem immer noch auf die Daten ohne Verlust zugreifen kannst -- Dir bleibt ggf also noch Zeit, ein aktuelles Backup zu ziehen und das RAID dann NEU aufzubauen.

@@dgar:

wenn Du das NAS nicht wirklich intensiv nutzt, kannst Du auf RAID getrost verzichten und die Daten z.B. per rsync auf eine zweite (und eine dritte) Platte spiegeln. Aus meiner Sicht ist ein solches Backup immer wichtiger als irgendein RAID. Auch wenn ich nur zwei Platten hätte, würde ich definitiv kein RAID machen, sondern klassisch Backups. Sichert nicht nur gegen versehentliches Löschen und ggf auch gegen Verschlüsselungsviren (je nachdem, wie man es aufsetzt), sondern ist auch notwendig, um sich gegen Fehler oder "dicke Finger" in der Raidkonfiguration abzusichern.

Je nachdem, wie wichtig Dir die Daten sind, ist zu überlegen, ob eine Platte nicht regelmässig "woanders" liegt, beispielsweise im Schreibtisch am Arbeitsplatz.

Da ich gern Dinge ausprobiere, mir andererseits meine Daten auch (teilweise) sehr wichtig sind, habe ich einerseits ein NAS mit Raid1, aber auch einen Raspberry mit USB-Platten in einem anderen Raum. Der wiederum macht jede Nacht ein Backup meiner wichtigsten Daten auf verschiedene Platten, und zwar so, dass ich auch auf Vorversionen zurückgreifen kann.

roger23 (Beitrag #583) schrieb:

Aus meiner Sicht ist ein solches Backup immer wichtiger als irgendein RAID.

Ein Backup ist IMMER wichtiger -- RAID ersetzt das Backup schließlich nicht, sondern ergänzt es durch Hinzufügen von Ausfallsicherheit.

Nun ja, man muss es leider immer Wiederholen.
Wobei ich jetzt keinem der aktuell "Anwesenden" etwas unterstellen möchte. Aber viele setzen Backup und RAID mehr oder weniger gleich.

Aber viele setzen Backup und RAID mehr oder weniger gleich.

Leider sogar viele Leute, die ihr Geld in der IT verdienen und von denen es einige wirklich besser wissen müssten.

Und all denen, denen noch nie eine Platte kaputt gegangen ist, sei gesagt: doch, sowas passiert. Wirklich. Und nicht zu selten. Bei mir nach jeweils mehrjährigen Gebrauch mehr als jede zehnte. Und ohne Backup sind die Daten weg. Und die Datenrettungsdienste schaffen es nicht immer, kaputte Platten zu reparieren und nehmen viel Geld, viel mehr als USB-Platten zur Datensicherung kosten...

.. und wenn man ein selbstgeschraubtes NAS hat, hat man schon mehr Freiheit, was die zusätzliche Datensicherung angeht. Bisweilen kann man schauen, ob man das Backup verschlüsselt in irgendeine Cloud bekommt.. (aber den Schlüssel nicht vergessen, wäre blöd, wenn der nur auf der kaputten Platte ist...)

Werde es wohl so realisieren, dass due wichtigsten Daten mehrfach auf verschiedenen HDDs liegen innerhalb des Nas' per sync. Und demnächst bekomm ich bei 1und1 150Gb onlinespeicher für umme wo ich diese Daten dann verschlüsselt hochjage

.oO( Only wimps use [tape] backup: real men just upload their important stuff on FTP, and let the rest of the world mirror it )

Hallo. Habe nun auch einen FreeNAS Server gebaut mit folgenden Teilen:
MB: ASUS Prime X 370 Pro
CPU: AMD Ryzen 5 1600X
Arbeitsspeicher: 16 GB Kingston KSM26ED8/16ME (ECC)
BS Festplatte: WD GREEN 120GB M.2 SSD
Datenfestplatten: 3x 4TB WD RED im Raid-Z (Netto 7,2 TB)

Von einer WD My Cloud EX2 möchte ich nun meine 3,92 TB an Daten übertragen. Mit FreeFileSync komme ich im Schnitt auf 42 MB/s. Das kommt mir etwas wenig vor. Woran kann das liegen?

Mein Laptop ist über einen Gigabyte Switch an meinen Router angeschlossen. Der FreeNAS Server ist direkt per Kabel am Router angeschlossen.

42 MB/s oder 42 Mbps?
Ersteres wäre 336 Mbps und jetzt eigentlich eher nicht soooo langsam...


Andere Frage: Hast Du die Platten denn vor Betanken mit Daten einem burn in unterzogen?

Wie ist denn die Transferrate von der WD direkt auf deinen Laptop? Wie ist der Datendurchsatz vom NAS direkt auf deinen Laptop und zurück? Dann siehst du wo der Flaschenhals ist.

Aber: Ein Ryzen mit 16GB als NAS? Bisschen viele Kanonen für sehr wenige Spatzen oder? Wir nutzen im Rechenzentrum 8-16 Bay NAS Systeme mit 4-8GB RAM und Atom/Celeron/i3 Prozessoren, die 5-20 iSCSI Targets für diverse Server bereitstellen und/oder Backups von Dutzenden Systemen aufnehmen; völlig ausreichend.

Ciao, Daniel

@dan
Läuft auf denen ZFS? Vermutlich eher nicht...

Nein, auf diesen Systemen betreiben wir kein ZFS. Das es hier verwendet wird habe ich überlesen, umso eher bleibe ich bei meinem Kanonen/Spatzen Vergleich ZFS ist wirklich klasse und hat grossartige Anwendungsfälle, aber ein 3bay NAS im Heimbereich gehört für mich nicht zu einem der prädestinierten Einsatzzwecke. Aber jeder wie er mag.

Ciao, Daniel

Wird sicher noch ausgebaut. Er hat ja noch etwas Luft nach oben.

Da ich es nicht kenne: Wie funktioniert denn das FreeFileSync? Wenn das Shares über SMB nutzt...

Ich schreibe eine Bachelor Arbeit über meinen HomeServer. Die Teile sind mir quasi günstig zugeflogen. Beim Ryzen 5 1600X für 60 Euro konnte ich nicht nein sagen. Beim kopieren der Dateien kommt er auf eine Auslastung von 4%. Also noch ein wenig Reserve :-D
Werde heute Abend mal schauen wie die Übertragungen untereinander laufen.

Was ist ein burn in?`Höre ich jetzt zum ersten Mal.

Ja, FreeFileSync schreibt die Daten per smb auf meinen freigegebenen Ordner.

Tribun86 (Beitrag #596) schrieb:

Was ist ein burn in?`Höre ich jetzt zum ersten Mal.

Stress-Test für die Platten. Damit stellst Du idR relativ schnell fest, ob die Platten einen Defekt haben oder nicht.

Tribun86 (Beitrag #597) schrieb:

Ja, FreeFileSync schreibt die Daten per smb auf meinen freigegebenen Ordner.

SMB ist bekanntlich nicht das performanteste.

NB: Gerade auf die Spec des Boards geschaut. Du hast hoffentlich dort kein RAID aktiviert?!

NB: Gerade auf die Spec des Boards geschaut. Du hast hoffentlich dort kein RAID aktiviert?![/quote]

Die Platten sind neu und im FreeNAS werden sie als fehlerfrei angezeigt.

Meinst du ob RAID im Bios aktiv ist? Das müsste ich nachher mal gucken. Denke aber eher nein. Aktuell sollte es ja über Raid-Z laufen.

ZFS auf Hardware-RAID -> keine gute Idee.

Tribun86 (Beitrag #599) schrieb:

Die Platten sind neu

Und darum der burn in. Meist fallen neue Platten innerhalb der ersten Tage aus. Durch den burn in bist Du eher in der Lage, defekte Platten frühzeitig zu erkennen und ggf auszutauschen.