NAS: Laufwerksaustausch Raid1 oder Raid5?

[schorsch_76]

Hallo zusammen,

auf meinem Debian NAS läuft zur Zeit 3x WD Red 1TB im MD Raid5. Darüber läuft ein Btrfs. Jetzt wird der nutzbare Platz langsam zu wenig.

Mit den Platten selbst bin ich sehr zufrieden. Sie sind jetzt 4 Jahre alt und ich überlege sie auszutauschen gegen größere CMR Platten [1].
Meine eine Ideen wären:

• 2x WD Red Plus 4 TB im Raid1
• 3x WD Red Plus 4 TB im Raid5

Bin mir nicht sicher ob ein Raid5 unter dem Filesystem viel Vorteil bringt bei einem Btrfs. Stichwort: Checksummen. Kapazität wäre bei der Raid5 Variante natürlich höher. Bis jetzt bin ich mit den 2 TB verfügbarem Platz gut ausgekommen. Ob ich 8 TB brauche in der näheren Zukunft glaube ich nicht. Mir geht es um die Ausfallsicherheit und Sicherheit der Daten.

Irgendwie bin ich gerade unsicher was besser wäre ...

[1] https://www.alternate.de/WD/Red-Plus-NA ... ct/1878411

[bluestar]

Irgendwie bin ich gerade unsicher was besser wäre ...

Falls du das RAID Level wechselst steht dir natürlich die Datenmigration als ToDo noch zusätzlich im Raum, wenn du lediglich die Platten tauschst, dann kannst du das im RAID5 Verbund nacheinander machen und am Ende das Dateisystem vergrößern.

[schorsch_76]

Naja, wie geschrieben: In welcher Konstellation wäre die Ausfallwahrscheinlichkeit am geringsten und die Datensicherheit am höchsten? Backups mach ich natürlich .... Ob die Migration Einfach wäre spielt keine Rolle. Ich würde ein Backup auf die neuen Platten aufspielen.

[hikaru]

Die Ausfallwahrscheinlichkeit ist in der RAID1-Lösung geringer. In beiden Setups darf eine HDD ausfallen, bevor Datenverlust eintritt. Du hast aber bei RAID1 nur zwei Kandidaten die ausfallen können, während du bei RAID5 Drei hast.
Irgendwo hatte ich mal gelesen, das RAID5 aber ohnehin keine ernsthafte Lösung ist, sondern man sich entweder für das einfachere RAID1 oder das sicherere RAID6 entscheiden sollte.

[cosinus]

Irgendwo hatte ich mal gelesen, das RAID5 aber ohnehin keine ernsthafte Lösung ist, sondern man sich entweder für das einfachere RAID1 oder das sicherere RAID6 entscheiden sollte.

Ja, unsere Backup-NAS in der Firma laufen mit RAID6. Ich denke du meinst wohl, dass es empfohlen ist, bei Multiterabyte-RAIDs auf RAID6 zu setzen, damit man den Ausfall von zwei Disks verkraften kann. Wenn nämlich eine ausfällt und man diese ersetzt dauert es ja u.U. viele Stunden bis das RAID wieder synchron ist. - in dieser Rebuildphase darf natürlich keine weitere ausfallen.

Wir haben auch auch zwei NAS mit jew. 8 Disks. Ein RAID6 über 5 Disks finde ich jetzt nicht so prickelnd

[hikaru]

Ein RAID6 über 5 Disks finde ich jetzt nicht so prickelnd

Ich betreibe privat ein RAID6 mit 4 Disks und denke gerade über eine Erweiterung um eine 5. Disk nach.
Eben diese Erweiterungsoption war vor zwei Jahren der Grund, mich für RAID6 statt RAID1 zu entscheiden, denn so brauche ich nur eine neue HDD kaufen, statt zwei.

[cosinus]

Ist jetzt auch die Frage wie wichtig diese Daten auf dem RAID sind. Sicherst du die Daten vom RAID nochmal regelmäßig auf eine andere große Disk oder ein anderes großes Array?

[schorsch_76]

Das sind für mich wichtige Daten . Für den Rest der Menschheit ... egal

Backups mach ich regelmässig auf eine externe Platte. Trotzdem möchte ich das Backup haben, aber nicht nutzen müssen.

[cosinus]

Dann gibt es kein wirkliches "Richtig" oder "Falsch". Ich würde bei 5 Disks wohl noch ein RAID5 erstellen. Ab 6 Disks würde ich RAID6 nehmen.
Du hast aber vor zwei Arrays zu erstellen? Eins mit RAID1 und eins mit RAID5? Warum nicht ein großes über alle 5 Disks?

[Draal]

Nach meinen Erfahrungen kündigen WD Red CMR HDDs ihr Ableben an. Sie fangen an Schreib/Lesefehler zu produzieren. Wenn ich dann mal den Monitor meines NAS einschalte, werden die dort auch in tty1 signalisiert.
Darauf hin besorge ich neue Laufwerde, schalte SMART ein kopiere die Inhalte auf die neuen, dauert aber einige Tage.
Lebensdauer der WD Red liegt nmE etwa bei 5 Jahren im Dauerbetrieb.
Gesichert werden täglich nur Dokumente, diverse Server und /etc, den Rest kann man sich, zur Not, wieder besorgen.

Ich weiss, dass das etwas OT ist, allerdings habe über die Jahrzehnte mit diesem Vorgehen, auch ohne RAID, keine Datenverluste erlitten.

Selbstverständlich spiele ich mit der Maschine kein Fussball.

[cosinus]

Selbstverständlich spiele ich mit der Maschine kein Fussball.

OT: Es gibt aber welche, die bowlen mit Festplatten

[MSfree]

OT: Es gibt aber welche, die bowlen mit Festplatten

Erinnert mich an Simon Travaglia.

[schorsch_76]

Dann gibt es kein wirkliches "Richtig" oder "Falsch". Ich würde bei 5 Disks wohl noch ein RAID5 erstellen. Ab 6 Disks würde ich RAID6 nehmen.
Du hast aber vor zwei Arrays zu erstellen? Eins mit RAID1 und eins mit RAID5? Warum nicht ein großes über alle 5 Disks?

Das sind meine 2 Alternativen die ich überlegt habe. Keine 2 Arrays Ich denke ich bestelle jetzt 3x 4 TB Platten und mache dann ein Raid1 über alle 3 Platten. Wenn ich später mal mehr Platz brauche kann ich daraus ein Raid5 machen.

https://de.wikipedia.org/wiki/RAID#Die_ ... _Einzelnen

Bei der Präsenz von drei Platten à 1 TB, die jeweils eine Ausfallwahrscheinlichkeit von 1 % in einem gegebenen Zeitraum haben, gilt

RAID 0 stellt 3 TB zur Verfügung. Die Ausfallwahrscheinlichkeit des RAIDs beträgt 2,9701 % (1 in 34 Fällen).
RAID 1 stellt 1 TB zur Verfügung. Die Ausfallwahrscheinlichkeit des RAIDs beträgt 0,0001 % (1 in 1.000.000 Fällen).
RAID 5 stellt 2 TB zur Verfügung. Die Ausfallwahrscheinlichkeit des RAIDs beträgt 0,0298 % (1 in 3.356 Fällen).

Danke für euren Input

[schorsch_76]

Just FYI

Btrfs-Raid1C3

georg@nas-dsm:~$ sudo btrfs fi usage /srv/samba
[sudo] Passwort für georg:
Overall:
Device size: 10.92TiB
Device allocated: 4.54TiB
Device unallocated: 6.37TiB
Device missing: 0.00B
Device slack: 0.00B
Used: 4.54TiB
Free (estimated): 2.12TiB (min: 2.12TiB)
Free (statfs, df): 2.12TiB
Data ratio: 3.00
Metadata ratio: 3.00
Global reserve: 512.00MiB (used: 0.00B)
Multiple profiles: no

Data,RAID1C3: Size:1.51TiB, Used:1.51TiB (99.98%)
/dev/disk/by-partlabel/data1 1.51TiB
/dev/sdc1 1.51TiB
/dev/disk/by-partlabel/data3 1.51TiB

Metadata,RAID1C3: Size:3.00GiB, Used:2.32GiB (77.27%)
/dev/disk/by-partlabel/data1 3.00GiB
/dev/sdc1 3.00GiB
/dev/disk/by-partlabel/data3 3.00GiB

System,RAID1C3: Size:32.00MiB, Used:288.00KiB (0.88%)
/dev/disk/by-partlabel/data1 32.00MiB
/dev/sdc1 32.00MiB
/dev/disk/by-partlabel/data3 32.00MiB

Unallocated:
/dev/disk/by-partlabel/data1 2.12TiB
/dev/sdc1 2.12TiB
/dev/disk/by-partlabel/data3 2.12TiB
georg@nas-dsm:~$ sudo btrfs device usage /srv/samba
/dev/disk/by-partlabel/data1, ID: 1
Device size: 3.64TiB
Device slack: 0.00B
Data,RAID1C3: 1.51TiB
Metadata,RAID1C3: 3.00GiB
System,RAID1C3: 32.00MiB
Unallocated: 2.12TiB

/dev/sdc1, ID: 2
Device size: 3.64TiB
Device slack: 0.00B
Data,RAID1C3: 1.51TiB
Metadata,RAID1C3: 3.00GiB
System,RAID1C3: 32.00MiB
Unallocated: 2.12TiB

/dev/disk/by-partlabel/data3, ID: 3
Device size: 3.64TiB
Device slack: 0.00B
Data,RAID1C3: 1.51TiB
Metadata,RAID1C3: 3.00GiB
System,RAID1C3: 32.00MiB
Unallocated: 2.12TiB

[hikaru]

Rein interessehalber:

Data,RAID1C3: Size:1.51TiB, Used:1.51TiB (99.98%)

Ist das noch performant?

Hintergrund [1]:
Ich hatte mal eine HDD mit ext4 (ohne RAID) in die Knie gezwungen, indem ich sie zu 90% gefüllt habe. Das daraufhin mittelfristig anstehende HDD-Upgrade habe ich dann als Gelegenheit zum Umstieg auf RAID genutzt.


[1] viewtopic.php?p=1206099&#p1206099

[schorsch_76]

Rein interessehalber:

Data,RAID1C3: Size:1.51TiB, Used:1.51TiB (99.98%)

Ist das noch performant?

Hintergrund [1]:
Ich hatte mal eine HDD mit ext4 (ohne RAID) in die Knie gezwungen, indem ich sie zu 90% gefüllt habe. Das daraufhin mittelfristig anstehende HDD-Upgrade habe ich dann als Gelegenheit zum Umstieg auf RAID genutzt.


[1] viewtopic.php?p=1206099&#p1206099

Ja, das funktioniert problemlos. Je mehr Daten ich aufspiele, umso größer wird dieser Bereich. Es hat sich wohl einiges getan in btrfs. Insbesondere in dem Allocation Algorithmus. Konnte die Backups mit 90MB/s aufspielen von der USB Platte.

[1] https://www.phoronix.com/news/Using-Btr ... C3-RAID1C4
[2] https://kdave.github.io/btrfs-hilights-5.5-raid1c34/