RAID5 mit mdadm langsam...

Probleme mit Samba, NFS, FTP und Co.
Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 02.03.2019 14:22:08

Ich versuche etwas Licht in die Dunkelheit zu bringen.
Ich möchte in meiner Konstellation den Flaschenhals der Datenrate zu finden.

Client --> Netz --> Router --> Pi --> USB-Hub --> Festplatten
^ ^ ^ ^ ^ ^
Gbit/s --> ??? --> Gbit/s --> Gbit/s --> USB3.0 --> USB3.0
USB2.0 incl. Netzteil
warum du mit dd Lesetests machst?
<-- irgendwie muss ich anfangen und Schnittstellen oder Device ausschließen, oder? Wenn ich von Controller auf HDD schnell lesen oder kopieren kann dann kann ich doch diese Stelle schon mal ausschließen.
Also RAID5 über ein USB-Kabel auf 3 Platten?
Nein, RAID1 und zwei Platten.

Ich möchte nicht raten sondern genau die Stelle fixen!


EDIT:
2077
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
MSfree
Beiträge: 10686
Registriert: 25.09.2007 19:59:30

Re: RAID5 mit mdadm langsam...

Beitrag von MSfree » 02.03.2019 14:38:24

Kannst du mal am Raspi einen Bildschirm und eine Tastatur anschließen (alternativ ginge auch ein SSH login) und dann und

Code: Alles auswählen

iotop
auf dem PI mitlaufen lassen, während du etwas auf deinen Windowsrechner kopierst?

Grundsätzlich halte ich den Rapis als Datengrab fürs Netzwerk eher ungeignet. Der interne USB des Raspis ist dabei sehr schnell überfordert. Ich habe hier zum Rumspielen gerade eine Synology DS218 stehen. Die hat auch "nur" einen 1.4GHz ARM-Prozessor mit 4 Kernen, ähnlich dem Raspi 3+. Die pustet aber fast immer mehr als 90MB/s durch das GBit-Ethernet, nur bei vielen kleinen Dateien bricht die Datenrate erwartungsgemäß ein, aber nicht auf 4MB/s.

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 02.03.2019 14:51:49

top:
2078
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
MSfree
Beiträge: 10686
Registriert: 25.09.2007 19:59:30

Re: RAID5 mit mdadm langsam...

Beitrag von MSfree » 02.03.2019 15:02:55

Wie vermutet, die CPU langweilt sich.

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 02.03.2019 15:05:18

MSfree hat geschrieben: ↑ zum Beitrag ↑
02.03.2019 15:02:55
Wie vermutet, die CPU langweilt sich.
Genau das hatte ich ja bereits gesagt. Gut das wir schon mal zur zwei sind. :D
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 02.03.2019 15:07:42

iotop tut sich kaum was:
2080

ausser ein paar mal war der kworker ausgelastet:
2081
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
MSfree
Beiträge: 10686
Registriert: 25.09.2007 19:59:30

Re: RAID5 mit mdadm langsam...

Beitrag von MSfree » 02.03.2019 15:47:37

Code: Alles auswählen

apt-get install sysstat
und dann mal mit

Code: Alles auswählen

iostat -x 1
den iowait-Wert beim Kopieren beobachten.

Benutzeravatar
bluestar
Beiträge: 2334
Registriert: 26.10.2004 11:16:34
Wohnort: Rhein-Main-Gebiet

Re: RAID5 mit mdadm langsam...

Beitrag von bluestar » 02.03.2019 16:24:05

TheBear hat geschrieben: ↑ zum Beitrag ↑
02.03.2019 14:22:08
Ich möchte nicht raten sondern genau die Stelle fixen!
Ich fänd es hilfreich, wenn dein Setup mal soweit dokumentiert wäre, das man da überhaupt sinnvoll das Problem suchen kann.

Spontan würde ich dir zu einem ODROID-H2 raten, der ist für deinen Einsatzzweck besser geeignet.

Benutzeravatar
Lord_Carlos
Beiträge: 5578
Registriert: 30.04.2006 17:58:52
Lizenz eigener Beiträge: GNU Free Documentation License
Wohnort: Dänemark

Re: RAID5 mit mdadm langsam...

Beitrag von Lord_Carlos » 04.03.2019 12:29:46

Mit Netz meinst du Internet?
Bei client1 ist der upload auch schneller als ~40 Mbit/s / 5 MB/s? Und dein Download auch.

Code: Alles auswählen

╔═╗┬ ┬┌─┐┌┬┐┌─┐┌┬┐╔╦╗
╚═╗└┬┘└─┐ │ ├┤ │││ ║║
╚═╝ ┴ └─┘ ┴ └─┘┴ ┴═╩╝ rockt das Forum!

Benutzeravatar
bluestar
Beiträge: 2334
Registriert: 26.10.2004 11:16:34
Wohnort: Rhein-Main-Gebiet

Re: RAID5 mit mdadm langsam...

Beitrag von bluestar » 04.03.2019 12:43:16

Lord_Carlos hat geschrieben: ↑ zum Beitrag ↑
04.03.2019 12:29:46
Mit Netz meinst du Internet?
Meine Glaskugel sagt: Er meint sein LAN

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 04.03.2019 16:49:19

MSfree hat geschrieben: ↑ zum Beitrag ↑
02.03.2019 15:47:37

Code: Alles auswählen

apt-get install sysstat
und dann mal mit

Code: Alles auswählen

iostat -x 1
den iowait-Wert beim Kopieren beobachten.
2083
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 04.03.2019 16:53:01

Spontan würde ich dir zu einem ODROID-H2 raten, der ist für deinen Einsatzzweck besser geeignet.
Danke dir für den Tipp. Hatte den Tipp schon mal bekommen gehabt. Ich werde es evtl. später angucken aber zuerst will ich wissen was der PI kann.
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
bluestar
Beiträge: 2334
Registriert: 26.10.2004 11:16:34
Wohnort: Rhein-Main-Gebiet

Re: RAID5 mit mdadm langsam...

Beitrag von bluestar » 04.03.2019 16:56:49

TheBear hat geschrieben: ↑ zum Beitrag ↑
04.03.2019 16:53:01
Danke dir für den Tipp. Hatte den Tipp schon mal bekommen gehabt. Ich werde es evtl. später angucken aber zuerst will ich wissen was der PI kann.
Der Pi ist kein NAS ... In deinem Screenshot sehe ich 4 Platten und 2 md Devices ....

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 04.03.2019 16:57:37

Lord_Carlos hat geschrieben: ↑ zum Beitrag ↑
04.03.2019 12:29:46
Mit Netz meinst du Internet?
Bei client1 ist der upload auch schneller als ~40 Mbit/s / 5 MB/s? Und dein Download auch.
Nein, nicht Internet. Ich meinte mein Netzwerk (LAN, WLAN). Die Glaskugel von Gandalf zeigt die Wahrheit :mrgreen:
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 04.03.2019 17:04:01

bluestar hat geschrieben: ↑ zum Beitrag ↑
04.03.2019 16:56:49
TheBear hat geschrieben: ↑ zum Beitrag ↑
04.03.2019 16:53:01
Danke dir für den Tipp. Hatte den Tipp schon mal bekommen gehabt. Ich werde es evtl. später angucken aber zuerst will ich wissen was der PI kann.
Der Pi ist kein NAS ... In deinem Screenshot sehe ich 4 Platten und 2 md Devices ....
Doch PI = NAS
Bitte keine weiteren Hinweise was die Hardware angeht! :hail:

Ja es sind zwei Arrays
md0 (2x Festplatte RAID 1) <-- ECHT
md127 (2x USB-STICKS RAID1) <-- TEST
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
bluestar
Beiträge: 2334
Registriert: 26.10.2004 11:16:34
Wohnort: Rhein-Main-Gebiet

Re: RAID5 mit mdadm langsam...

Beitrag von bluestar » 04.03.2019 17:06:02

TheBear hat geschrieben: ↑ zum Beitrag ↑
04.03.2019 17:04:01
Doch PI = NAS

Ja es sind zwei Arrays
md0 (2x Festplatte RAID 1) <-- ECHT
md127 (2x USB-STICKS RAID1) <-- TEST
Gut ich bin hier raus ...

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 05.03.2019 22:03:23

Hallo, da bin ich wieder. Kurzer Zwischenstand:

Upload:
2085
Teilweise bis 25MB/s erreicht. Die Datenrate schwang zwar sehr stark aber immerhin eine Leistungssteigerung von ca. 525%. Das ist doch was.

Download:
2086
Download sogar mehr als 35MB/s, bis jetzt hatte ich max. 6 oder 7 MB/s erreicht. Eine Leistungssteigerung von ca. 483% 8)

Was habe ich verändert:
1. PI an ein anderes Netzteil angeschlossen (morgen oder übermorgen kommt org. PI-Netzteil).
--> Upload hat sich von ca. 4MB/s auf ca. 6MB/s (ca. 50% mehr) verbessert
2. LAN direkt an der Fritz.box angeschlossen
--> Die Verbesserung sieht man ja oben.

Also das Performanceproblem nur auf PI zu schieben reicht nicht :!: (WZBW).

Jetzt muss ich nur noch die Schwankungen beim Upload fixen. :D
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
MSfree
Beiträge: 10686
Registriert: 25.09.2007 19:59:30

Re: RAID5 mit mdadm langsam...

Beitrag von MSfree » 06.03.2019 08:52:27

TheBear hat geschrieben: ↑ zum Beitrag ↑
05.03.2019 22:03:23
1. PI an ein anderes Netzteil angeschlossen (morgen oder übermorgen kommt org. PI-Netzteil).
--> Upload hat sich von ca. 4MB/s auf ca. 6MB/s (ca. 50% mehr) verbessert
Oder Placebo-Effekt, weil es zufällig 50% schneller war. Der Pi zeigt bei zu geringer Spannugn im Dispay oben rechts einen Biltz, hast du den gesehen? Möglicherweise werden in so einem Fall Stromsparmechanismen aktiviert, damit der Pi nicht abstürzt.
2. LAN direkt an der Fritz.box angeschlossen
--> Die Verbesserung sieht man ja oben.
Wie war der Pi denn vorher angeschlossen? Ich hatte den vorherigen Beiträgen eigentlich entnommen, daß der nicht am WLAN hängt.

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 07.03.2019 18:55:50

MSfree hat geschrieben: ↑ zum Beitrag ↑
06.03.2019 08:52:27
Oder Placebo-Effekt, weil es zufällig 50% schneller war. Der Pi zeigt bei zu geringer Spannugn im Dispay oben rechts einen Biltz, hast du den gesehen? Möglicherweise werden in so einem Fall Stromsparmechanismen aktiviert, damit der Pi nicht abstürzt.
Könnte sein, was ich allerdings ausschließe da schon sehr viele Test durchgeführt. Blitz habe ich nich, ich habe only "Raspbian Stretch Lite" installiert.

Wie war der Pi denn vorher angeschlossen? Ich hatte den vorherigen Beiträgen eigentlich entnommen, daß der nicht am WLAN hängt.
PI ist per Gbit LAN direkt an der FritzBox angeschloss. WLAN hatte ich auch bereits getestet gehabt um die LAN/USB Schnittstelle zu entlasten.
Was ich meinte ist: Den Client(Laptop) per LAN-Kabel direkt an die FritzBox angeschlossen. Die Tests vorher hatte ich alle über Powerline-Adapter durchgeführt. Da die Mesh-Übersicht in der Fritz.Box 1Gbit/s anzeigt, dachte ich dass die Datenrate auch wirklich vorhanden ist. Wie es aussieht ist das nicht der Fall, leider.
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Benutzeravatar
MSfree
Beiträge: 10686
Registriert: 25.09.2007 19:59:30

Re: RAID5 mit mdadm langsam...

Beitrag von MSfree » 07.03.2019 19:47:56

TheBear hat geschrieben: ↑ zum Beitrag ↑
07.03.2019 18:55:50
Blitz habe ich nich, ich habe only "Raspbian Stretch Lite" installiert.
Der Blitz kommt auch bei Raspbian-Lite, der wird direkt vom Kernel in den Framebuffer gezeichnet, auch im Textmodus.
WLAN hatte ich auch bereits getestet gehabt um die LAN/USB Schnittstelle zu entlasten.
WLAN hängt beim Raspi auch am USB.
Die Tests vorher hatte ich alle über Powerline-Adapter durchgeführt.
Dann wird da wohl der Hund begraben sein. Ich würde vorschlagen, noch ein paar Test via Powerline zwischen zwei "normalen" Rechnern durchzuführen, um den Raspi als Ursache auszuschließen.
Da die Mesh-Übersicht in der Fritz.Box 1Gbit/s anzeigt
Eine der Powerline-Adapter wird wohl mit einem Netzwerkkabel an der Fritzbox angeschlossen sein. Die Verbindung zwischen Fitzbox und PL-Adapter läuft dann natürlich mit GBit. Die Fritzbox bekommt aber keine Information darüber, wie schnell PL wirklich ist, denn Geschwindigkeitmessungen führt die Fritzbox nicht durch.

Benutzeravatar
TheBear
Beiträge: 17
Registriert: 16.02.2019 09:44:06

Re: RAID5 mit mdadm langsam...

Beitrag von TheBear » 07.03.2019 22:03:56

Der Blitz kommt auch bei Raspbian-Lite, der wird direkt vom Kernel in den Framebuffer gezeichnet, auch im Textmodus.
OK, dann muss ich mich noch schlau machen. Danke.
WLAN hängt beim Raspi auch am USB.
WLAN nicht, LAN und USB
Dann wird da wohl der Hund begraben sein...
Das sieht momentan so aus, werde noch einige Tests machen. Habe devolo Cockpit installiert, evtl. kriege ich bei den Adaptern auch noch die Bremse raus, mal gucken.

2089
WZlink zeigt eine Datenrate von "283Mbit/s", diese Rate springt ca. zwischen 200 und 400 Mbit/s. Ein Upload bei dieser Verbindung liegt ca. bei 7MB/s. Es muss aber min. 30MB/s möglich sein.
„Der Zweifel ist der Beginn der Wissenschaft. Wer nichts anzweifelt, prüft nichts. Wer nichts prüft, entdeckt nichts. Wer nichts entdeckt, ist blind und bleibt blind.“
Meine ThreemaID: NZNR5X9S

Antworten