NAS: Laufwerksaustausch Raid1 oder Raid5?

Debian auf Notebooks und speziellen Geräten wie eingebetteten Systemen, Routern, Set-Top-Boxen, ...
Antworten
Benutzeravatar
schorsch_76
Beiträge: 2535
Registriert: 06.11.2007 16:00:42
Lizenz eigener Beiträge: MIT Lizenz

NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von schorsch_76 » 05.06.2023 10:08:07

Hallo zusammen,

auf meinem Debian NAS läuft zur Zeit 3x WD Red 1TB im MD Raid5. Darüber läuft ein Btrfs. Jetzt wird der nutzbare Platz langsam zu wenig.

Mit den Platten selbst bin ich sehr zufrieden. Sie sind jetzt 4 Jahre alt und ich überlege sie auszutauschen gegen größere CMR Platten [1].
Meine eine Ideen wären:
  • 2x WD Red Plus 4 TB im Raid1
  • 3x WD Red Plus 4 TB im Raid5
Bin mir nicht sicher ob ein Raid5 unter dem Filesystem viel Vorteil bringt bei einem Btrfs. Stichwort: Checksummen. Kapazität wäre bei der Raid5 Variante natürlich höher. Bis jetzt bin ich mit den 2 TB verfügbarem Platz gut ausgekommen. Ob ich 8 TB brauche in der näheren Zukunft glaube ich nicht. Mir geht es um die Ausfallsicherheit und Sicherheit der Daten.

Irgendwie bin ich gerade unsicher was besser wäre ... :|

[1] https://www.alternate.de/WD/Red-Plus-NA ... ct/1878411

Benutzeravatar
bluestar
Beiträge: 2334
Registriert: 26.10.2004 11:16:34
Wohnort: Rhein-Main-Gebiet

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von bluestar » 05.06.2023 11:29:07

schorsch_76 hat geschrieben: ↑ zum Beitrag ↑
05.06.2023 10:08:07
Irgendwie bin ich gerade unsicher was besser wäre ... :|
Falls du das RAID Level wechselst steht dir natürlich die Datenmigration als ToDo noch zusätzlich im Raum, wenn du lediglich die Platten tauschst, dann kannst du das im RAID5 Verbund nacheinander machen und am Ende das Dateisystem vergrößern.

Benutzeravatar
schorsch_76
Beiträge: 2535
Registriert: 06.11.2007 16:00:42
Lizenz eigener Beiträge: MIT Lizenz

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von schorsch_76 » 05.06.2023 12:14:56

Naja, wie geschrieben: In welcher Konstellation wäre die Ausfallwahrscheinlichkeit am geringsten und die Datensicherheit am höchsten? Backups mach ich natürlich .... Ob die Migration Einfach wäre spielt keine Rolle. Ich würde ein Backup auf die neuen Platten aufspielen.

Benutzeravatar
hikaru
Moderator
Beiträge: 13559
Registriert: 09.04.2008 12:48:59

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von hikaru » 05.06.2023 12:31:56

Die Ausfallwahrscheinlichkeit ist in der RAID1-Lösung geringer. In beiden Setups darf eine HDD ausfallen, bevor Datenverlust eintritt. Du hast aber bei RAID1 nur zwei Kandidaten die ausfallen können, während du bei RAID5 Drei hast.
Irgendwo hatte ich mal gelesen, das RAID5 aber ohnehin keine ernsthafte Lösung ist, sondern man sich entweder für das einfachere RAID1 oder das sicherere RAID6 entscheiden sollte.

Benutzeravatar
cosinus
Beiträge: 3410
Registriert: 08.02.2016 13:44:11
Lizenz eigener Beiträge: GNU General Public License
Wohnort: Bremen

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von cosinus » 05.06.2023 12:42:45

hikaru hat geschrieben: ↑ zum Beitrag ↑
05.06.2023 12:31:56
Irgendwo hatte ich mal gelesen, das RAID5 aber ohnehin keine ernsthafte Lösung ist, sondern man sich entweder für das einfachere RAID1 oder das sicherere RAID6 entscheiden sollte.
Ja, unsere Backup-NAS in der Firma laufen mit RAID6. Ich denke du meinst wohl, dass es empfohlen ist, bei Multiterabyte-RAIDs auf RAID6 zu setzen, damit man den Ausfall von zwei Disks verkraften kann. Wenn nämlich eine ausfällt und man diese ersetzt dauert es ja u.U. viele Stunden bis das RAID wieder synchron ist. - in dieser Rebuildphase darf natürlich keine weitere ausfallen.

Wir haben auch auch zwei NAS mit jew. 8 Disks. Ein RAID6 über 5 Disks finde ich jetzt nicht so prickelnd :?

Benutzeravatar
hikaru
Moderator
Beiträge: 13559
Registriert: 09.04.2008 12:48:59

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von hikaru » 05.06.2023 12:51:21

cosinus hat geschrieben: ↑ zum Beitrag ↑
05.06.2023 12:42:45
Ein RAID6 über 5 Disks finde ich jetzt nicht so prickelnd :?
Ich betreibe privat ein RAID6 mit 4 Disks und denke gerade über eine Erweiterung um eine 5. Disk nach. ;)
Eben diese Erweiterungsoption war vor zwei Jahren der Grund, mich für RAID6 statt RAID1 zu entscheiden, denn so brauche ich nur eine neue HDD kaufen, statt zwei.

Benutzeravatar
cosinus
Beiträge: 3410
Registriert: 08.02.2016 13:44:11
Lizenz eigener Beiträge: GNU General Public License
Wohnort: Bremen

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von cosinus » 05.06.2023 13:01:37

Ist jetzt auch die Frage wie wichtig diese Daten auf dem RAID sind. Sicherst du die Daten vom RAID nochmal regelmäßig auf eine andere große Disk oder ein anderes großes Array? :D

Benutzeravatar
schorsch_76
Beiträge: 2535
Registriert: 06.11.2007 16:00:42
Lizenz eigener Beiträge: MIT Lizenz

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von schorsch_76 » 05.06.2023 13:50:16

Das sind für mich wichtige Daten :) . Für den Rest der Menschheit ... egal :P

Backups mach ich regelmässig auf eine externe Platte. Trotzdem möchte ich das Backup haben, aber nicht nutzen müssen. :mrgreen:

Benutzeravatar
cosinus
Beiträge: 3410
Registriert: 08.02.2016 13:44:11
Lizenz eigener Beiträge: GNU General Public License
Wohnort: Bremen

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von cosinus » 05.06.2023 14:08:07

Dann gibt es kein wirkliches "Richtig" oder "Falsch". Ich würde bei 5 Disks wohl noch ein RAID5 erstellen. Ab 6 Disks würde ich RAID6 nehmen.
Du hast aber vor zwei Arrays zu erstellen? Eins mit RAID1 und eins mit RAID5? Warum nicht ein großes über alle 5 Disks?

Benutzeravatar
Draal
Beiträge: 503
Registriert: 11.03.2005 14:45:26

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von Draal » 05.06.2023 14:26:50

Nach meinen Erfahrungen kündigen WD Red CMR HDDs ihr Ableben an. Sie fangen an Schreib/Lesefehler zu produzieren. Wenn ich dann mal den Monitor meines NAS einschalte, werden die dort auch in tty1 signalisiert.
Darauf hin besorge ich neue Laufwerde, schalte SMART ein kopiere die Inhalte auf die neuen, dauert aber einige Tage.
Lebensdauer der WD Red liegt nmE etwa bei 5 Jahren im Dauerbetrieb.
Gesichert werden täglich nur Dokumente, diverse Server und /etc, den Rest kann man sich, zur Not, wieder besorgen.

Ich weiss, dass das etwas OT ist, allerdings habe über die Jahrzehnte mit diesem Vorgehen, auch ohne RAID, keine Datenverluste erlitten.

Selbstverständlich spiele ich mit der Maschine kein Fussball. :P

Benutzeravatar
cosinus
Beiträge: 3410
Registriert: 08.02.2016 13:44:11
Lizenz eigener Beiträge: GNU General Public License
Wohnort: Bremen

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von cosinus » 05.06.2023 15:09:11

Draal hat geschrieben: ↑ zum Beitrag ↑
05.06.2023 14:26:50
Selbstverständlich spiele ich mit der Maschine kein Fussball. :P
OT: Es gibt aber welche, die bowlen mit Festplatten :mrgreen:

Benutzeravatar
MSfree
Beiträge: 10686
Registriert: 25.09.2007 19:59:30

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von MSfree » 05.06.2023 15:26:13

cosinus hat geschrieben: ↑ zum Beitrag ↑
05.06.2023 15:09:11
OT: Es gibt aber welche, die bowlen mit Festplatten :mrgreen:
Erinnert mich an Simon Travaglia. :mrgreen:

Benutzeravatar
schorsch_76
Beiträge: 2535
Registriert: 06.11.2007 16:00:42
Lizenz eigener Beiträge: MIT Lizenz

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von schorsch_76 » 05.06.2023 16:21:07

cosinus hat geschrieben: ↑ zum Beitrag ↑
05.06.2023 14:08:07
Dann gibt es kein wirkliches "Richtig" oder "Falsch". Ich würde bei 5 Disks wohl noch ein RAID5 erstellen. Ab 6 Disks würde ich RAID6 nehmen.
Du hast aber vor zwei Arrays zu erstellen? Eins mit RAID1 und eins mit RAID5? Warum nicht ein großes über alle 5 Disks?
Das sind meine 2 Alternativen die ich überlegt habe. Keine 2 Arrays ;) Ich denke ich bestelle jetzt 3x 4 TB Platten und mache dann ein Raid1 über alle 3 Platten. Wenn ich später mal mehr Platz brauche kann ich daraus ein Raid5 machen.

https://de.wikipedia.org/wiki/RAID#Die_ ... _Einzelnen
Wikipedia hat geschrieben:Bei der Präsenz von drei Platten à 1 TB, die jeweils eine Ausfallwahrscheinlichkeit von 1 % in einem gegebenen Zeitraum haben, gilt

RAID 0 stellt 3 TB zur Verfügung. Die Ausfallwahrscheinlichkeit des RAIDs beträgt 2,9701 % (1 in 34 Fällen).
RAID 1 stellt 1 TB zur Verfügung. Die Ausfallwahrscheinlichkeit des RAIDs beträgt 0,0001 % (1 in 1.000.000 Fällen).
RAID 5 stellt 2 TB zur Verfügung. Die Ausfallwahrscheinlichkeit des RAIDs beträgt 0,0298 % (1 in 3.356 Fällen).
Danke für euren Input :)

Benutzeravatar
schorsch_76
Beiträge: 2535
Registriert: 06.11.2007 16:00:42
Lizenz eigener Beiträge: MIT Lizenz

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von schorsch_76 » 07.06.2023 20:23:43

Just FYI

Btrfs-Raid1C3
georg@nas-dsm:~$ sudo btrfs fi usage /srv/samba
[sudo] Passwort für georg:
Overall:
Device size: 10.92TiB
Device allocated: 4.54TiB
Device unallocated: 6.37TiB
Device missing: 0.00B
Device slack: 0.00B
Used: 4.54TiB
Free (estimated): 2.12TiB (min: 2.12TiB)
Free (statfs, df): 2.12TiB
Data ratio: 3.00
Metadata ratio: 3.00
Global reserve: 512.00MiB (used: 0.00B)
Multiple profiles: no

Data,RAID1C3: Size:1.51TiB, Used:1.51TiB (99.98%)
/dev/disk/by-partlabel/data1 1.51TiB
/dev/sdc1 1.51TiB
/dev/disk/by-partlabel/data3 1.51TiB

Metadata,RAID1C3: Size:3.00GiB, Used:2.32GiB (77.27%)
/dev/disk/by-partlabel/data1 3.00GiB
/dev/sdc1 3.00GiB
/dev/disk/by-partlabel/data3 3.00GiB

System,RAID1C3: Size:32.00MiB, Used:288.00KiB (0.88%)
/dev/disk/by-partlabel/data1 32.00MiB
/dev/sdc1 32.00MiB
/dev/disk/by-partlabel/data3 32.00MiB

Unallocated:
/dev/disk/by-partlabel/data1 2.12TiB
/dev/sdc1 2.12TiB
/dev/disk/by-partlabel/data3 2.12TiB
georg@nas-dsm:~$ sudo btrfs device usage /srv/samba
/dev/disk/by-partlabel/data1, ID: 1
Device size: 3.64TiB
Device slack: 0.00B
Data,RAID1C3: 1.51TiB
Metadata,RAID1C3: 3.00GiB
System,RAID1C3: 32.00MiB
Unallocated: 2.12TiB

/dev/sdc1, ID: 2
Device size: 3.64TiB
Device slack: 0.00B
Data,RAID1C3: 1.51TiB
Metadata,RAID1C3: 3.00GiB
System,RAID1C3: 32.00MiB
Unallocated: 2.12TiB

/dev/disk/by-partlabel/data3, ID: 3
Device size: 3.64TiB
Device slack: 0.00B
Data,RAID1C3: 1.51TiB
Metadata,RAID1C3: 3.00GiB
System,RAID1C3: 32.00MiB
Unallocated: 2.12TiB

Benutzeravatar
hikaru
Moderator
Beiträge: 13559
Registriert: 09.04.2008 12:48:59

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von hikaru » 08.06.2023 10:19:05

Rein interessehalber:
schorsch_76 hat geschrieben: ↑ zum Beitrag ↑
07.06.2023 20:23:43
Data,RAID1C3: Size:1.51TiB, Used:1.51TiB (99.98%)
Ist das noch performant?

Hintergrund [1]:
Ich hatte mal eine HDD mit ext4 (ohne RAID) in die Knie gezwungen, indem ich sie zu 90% gefüllt habe. Das daraufhin mittelfristig anstehende HDD-Upgrade habe ich dann als Gelegenheit zum Umstieg auf RAID genutzt.


[1] viewtopic.php?p=1206099&#p1206099

Benutzeravatar
schorsch_76
Beiträge: 2535
Registriert: 06.11.2007 16:00:42
Lizenz eigener Beiträge: MIT Lizenz

Re: NAS: Laufwerksaustausch Raid1 oder Raid5?

Beitrag von schorsch_76 » 08.06.2023 13:27:40

hikaru hat geschrieben: ↑ zum Beitrag ↑
08.06.2023 10:19:05
Rein interessehalber:
schorsch_76 hat geschrieben: ↑ zum Beitrag ↑
07.06.2023 20:23:43
Data,RAID1C3: Size:1.51TiB, Used:1.51TiB (99.98%)
Ist das noch performant?

Hintergrund [1]:
Ich hatte mal eine HDD mit ext4 (ohne RAID) in die Knie gezwungen, indem ich sie zu 90% gefüllt habe. Das daraufhin mittelfristig anstehende HDD-Upgrade habe ich dann als Gelegenheit zum Umstieg auf RAID genutzt.


[1] viewtopic.php?p=1206099&#p1206099
Ja, das funktioniert problemlos. Je mehr Daten ich aufspiele, umso größer wird dieser Bereich. Es hat sich wohl einiges getan in btrfs. Insbesondere in dem Allocation Algorithmus. Konnte die Backups mit 90MB/s aufspielen von der USB Platte.

[1] https://www.phoronix.com/news/Using-Btr ... C3-RAID1C4
[2] https://kdave.github.io/btrfs-hilights-5.5-raid1c34/

Antworten