DSM 7.2 Volumen Auslastung sehr hoch, was tun?

[ElaCorp]

Hallo,

ich habe festgestellt, dass ich Probleme habe. ZB beim zugreien über SMB, weil es dann immer wieder sekundne gibt, wo keine Daten geliefert werden.
Dann habe ich nahc dem Grudn gesucht und sehe dass die Auslastung an die Grenze kommt.

Hier einiges Fotos.



Unter Dienste fällt mir nichts auf.



Was kann das sein? Verschlüsselung? SSD Cach? Docker?

 

[Benie]

Check mal die SMART Werte der HDDs

 

[Matchbox]

Neulich Active Insight deinstalliert und dann war endlich wieder Ruhe.

Anfangs hat der Dienst kaum Probleme gemacht, dann aber permanente Plattenzugriffe.

 

[ElaCorp]

Bei mir war das bereits deinstalliert.

Check mal die SMART Werte der HDDs

Hab ich gemacht: Das ist das Log (Hab es nochmla hier eingebunden weil der Zeilenumbruch hier besser ist.)

smartctl 6.5 (build date Sep 26 2022) [x86_64-linux-4.4.302+] (local build)
Copyright (C) 2002-16, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Seagate IronWolf
Device Model:     ST6000VN001-2BB186
Serial Number:    ZCT31ACQ
LU WWN Device Id: 5 000c50 0c6c27cf6
Firmware Version: SC60
User Capacity:    6,001,175,126,016 bytes [6.00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Rotation Rate:    5425 rpm
Form Factor:      3.5 inches
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ACS-3 T13/2161-D revision 5
SATA Version is:  SATA 3.1, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is:    Thu Sep 26 03:28:35 2024 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME                                                   FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate                                              0x000f   083   064   006    Pre-fail  Always       -       218815564
  3 Spin_Up_Time                                                     0x0003   091   091   000    Pre-fail  Always       -       0
  4 Start_Stop_Count                                                 0x0032   100   100   020    Old_age   Always       -       91
  5 Reallocated_Sector_Ct                                            0x0033   100   100   010    Pre-fail  Always       -       0
  7 Seek_Error_Rate                                                  0x000f   087   060   045    Pre-fail  Always       -       519713873
  9 Power_On_Hours                                                   0x0032   063   063   000    Old_age   Always       -       32472
 10 Spin_Retry_Count                                                 0x0013   100   100   097    Pre-fail  Always       -       0
 12 Power_Cycle_Count                                                0x0032   100   100   020    Old_age   Always       -       86
183 Runtime_Bad_Block                                                0x0032   100   100   000    Old_age   Always       -       0
184 End-to-End_Error                                                 0x0032   100   100   099    Old_age   Always       -       0
187 Reported_Uncorrect                                               0x0032   100   100   000    Old_age   Always       -       0
188 Command_Timeout                                                  0x0032   100   099   000    Old_age   Always       -       4295032833
189 High_Fly_Writes                                                  0x003a   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature_Cel                                          0x0022   064   058   040    Old_age   Always       -       36 (Min/Max 29/41)
191 G-Sense_Error_Rate                                               0x0032   100   100   000    Old_age   Always       -       1
192 Power-Off_Retract_Count                                          0x0032   100   100   000    Old_age   Always       -       1039
193 Load_Cycle_Count                                                 0x0032   100   100   000    Old_age   Always       -       1420
194 Temperature_Celsius                                              0x0022   036   042   000    Old_age   Always       -       36 (0 19 0 0 0)
195 Hardware_ECC_Recovered                                           0x001a   083   064   000    Old_age   Always       -       218815564
197 Current_Pending_Sector                                           0x0012   100   100   000    Old_age   Always       -       0
198 Offline_Uncorrectable                                            0x0010   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count                                             0x003e   200   200   000    Old_age   Always       -       0
240 Head_Flying_Hours                                                0x0000   100   253   000    Old_age   Offline      -       32312h+41m+17.329s
241 Total_LBAs_Written                                               0x0000   100   253   000    Old_age   Offline      -       91560591479
242 Total_LBAs_Read                                                  0x0000   100   253   000    Old_age   Offline      -       108184421076

smartctl 6.5 (build date Sep 26 2022) [x86_64-linux-4.4.302+] (local build)
Copyright (C) 2002-16, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Seagate IronWolf
Device Model:     ST6000VN001-2BB186
Serial Number:    ZCT312RA
LU WWN Device Id: 5 000c50 0c6c298ed
Firmware Version: SC60
User Capacity:    6,001,175,126,016 bytes [6.00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Rotation Rate:    5425 rpm
Form Factor:      3.5 inches
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ACS-3 T13/2161-D revision 5
SATA Version is:  SATA 3.1, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is:    Thu Sep 26 03:28:35 2024 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME                                                   FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate                                              0x000f   083   064   006    Pre-fail  Always       -       216377672
  3 Spin_Up_Time                                                     0x0003   091   091   000    Pre-fail  Always       -       0
  4 Start_Stop_Count                                                 0x0032   100   100   020    Old_age   Always       -       91
  5 Reallocated_Sector_Ct                                            0x0033   100   100   010    Pre-fail  Always       -       0
  7 Seek_Error_Rate                                                  0x000f   087   060   045    Pre-fail  Always       -       524806242
  9 Power_On_Hours                                                   0x0032   063   063   000    Old_age   Always       -       32472
 10 Spin_Retry_Count                                                 0x0013   100   100   097    Pre-fail  Always       -       0
 12 Power_Cycle_Count                                                0x0032   100   100   020    Old_age   Always       -       86
183 Runtime_Bad_Block                                                0x0032   100   100   000    Old_age   Always       -       0
184 End-to-End_Error                                                 0x0032   100   100   099    Old_age   Always       -       0
187 Reported_Uncorrect                                               0x0032   100   100   000    Old_age   Always       -       0
188 Command_Timeout                                                  0x0032   100   100   000    Old_age   Always       -       0
189 High_Fly_Writes                                                  0x003a   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature_Cel                                          0x0022   064   058   040    Old_age   Always       -       36 (Min/Max 29/42)
191 G-Sense_Error_Rate                                               0x0032   100   100   000    Old_age   Always       -       0
192 Power-Off_Retract_Count                                          0x0032   100   100   000    Old_age   Always       -       1040
193 Load_Cycle_Count                                                 0x0032   100   100   000    Old_age   Always       -       1422
194 Temperature_Celsius                                              0x0022   036   042   000    Old_age   Always       -       36 (0 20 0 0 0)
195 Hardware_ECC_Recovered                                           0x001a   083   064   000    Old_age   Always       -       216377672
197 Current_Pending_Sector                                           0x0012   100   100   000    Old_age   Always       -       0
198 Offline_Uncorrectable                                            0x0010   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count                                             0x003e   200   200   000    Old_age   Always       -       0
240 Head_Flying_Hours                                                0x0000   100   253   000    Old_age   Offline      -       32316h+54m+36.882s
241 Total_LBAs_Written                                               0x0000   100   253   000    Old_age   Offline      -       91225504497
242 Total_LBAs_Read                                                  0x0000   100   253   000    Old_age   Offline      -       108172149088

smartctl 6.5 (build date Sep 26 2022) [x86_64-linux-4.4.302+] (local build)
Copyright (C) 2002-16, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Seagate IronWolf
Device Model:     ST6000VN001-2BB186
Serial Number:    ZCT311NW
LU WWN Device Id: 5 000c50 0c6c264ee
Firmware Version: SC60
User Capacity:    6,001,175,126,016 bytes [6.00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Rotation Rate:    5425 rpm
Form Factor:      3.5 inches
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ACS-3 T13/2161-D revision 5
SATA Version is:  SATA 3.1, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is:    Thu Sep 26 03:28:36 2024 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME                                                   FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate                                              0x000f   075   064   006    Pre-fail  Always       -       29879440
  3 Spin_Up_Time                                                     0x0003   092   091   000    Pre-fail  Always       -       0
  4 Start_Stop_Count                                                 0x0032   100   100   020    Old_age   Always       -       94
  5 Reallocated_Sector_Ct                                            0x0033   100   100   010    Pre-fail  Always       -       0
  7 Seek_Error_Rate                                                  0x000f   087   060   045    Pre-fail  Always       -       531668015
  9 Power_On_Hours                                                   0x0032   063   063   000    Old_age   Always       -       32472
 10 Spin_Retry_Count                                                 0x0013   100   100   097    Pre-fail  Always       -       0
 12 Power_Cycle_Count                                                0x0032   100   100   020    Old_age   Always       -       89
183 Runtime_Bad_Block                                                0x0032   100   100   000    Old_age   Always       -       0
184 End-to-End_Error                                                 0x0032   100   100   099    Old_age   Always       -       0
187 Reported_Uncorrect                                               0x0032   100   100   000    Old_age   Always       -       0
188 Command_Timeout                                                  0x0032   100   100   000    Old_age   Always       -       0
189 High_Fly_Writes                                                  0x003a   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature_Cel                                          0x0022   065   059   040    Old_age   Always       -       35 (Min/Max 28/40)
191 G-Sense_Error_Rate                                               0x0032   100   100   000    Old_age   Always       -       4
192 Power-Off_Retract_Count                                          0x0032   100   100   000    Old_age   Always       -       1038
193 Load_Cycle_Count                                                 0x0032   100   100   000    Old_age   Always       -       1426
194 Temperature_Celsius                                              0x0022   035   041   000    Old_age   Always       -       35 (0 20 0 0 0)
195 Hardware_ECC_Recovered                                           0x001a   075   064   000    Old_age   Always       -       29879440
197 Current_Pending_Sector                                           0x0012   100   100   000    Old_age   Always       -       0
198 Offline_Uncorrectable                                            0x0010   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count                                             0x003e   200   200   000    Old_age   Always       -       0
240 Head_Flying_Hours                                                0x0000   100   253   000    Old_age   Offline      -       32318h+32m+05.791s
241 Total_LBAs_Written                                               0x0000   100   253   000    Old_age   Offline      -       90736890607
242 Total_LBAs_Read                                                  0x0000   100   253   000    Old_age   Offline      -       109297026398

smartctl 6.5 (build date Sep 26 2022) [x86_64-linux-4.4.302+] (local build)
Copyright (C) 2002-16, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Family:     Seagate IronWolf
Device Model:     ST6000VN001-2BB186
Serial Number:    ZCT31CM4
LU WWN Device Id: 5 000c50 0c6c54b37
Firmware Version: SC60
User Capacity:    6,001,175,126,016 bytes [6.00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Rotation Rate:    5425 rpm
Form Factor:      3.5 inches
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ACS-3 T13/2161-D revision 5
SATA Version is:  SATA 3.1, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is:    Thu Sep 26 03:28:36 2024 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART Attributes Data Structure revision number: 10
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME                                                   FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate                                              0x000f   083   064   006    Pre-fail  Always       -       217194068
  3 Spin_Up_Time                                                     0x0003   091   091   000    Pre-fail  Always       -       0
  4 Start_Stop_Count                                                 0x0032   100   100   020    Old_age   Always       -       94
  5 Reallocated_Sector_Ct                                            0x0033   100   100   010    Pre-fail  Always       -       0
  7 Seek_Error_Rate                                                  0x000f   087   060   045    Pre-fail  Always       -       547940885
  9 Power_On_Hours                                                   0x0032   063   063   000    Old_age   Always       -       32472
 10 Spin_Retry_Count                                                 0x0013   100   100   097    Pre-fail  Always       -       0
 12 Power_Cycle_Count                                                0x0032   100   100   020    Old_age   Always       -       89
183 Runtime_Bad_Block                                                0x0032   100   100   000    Old_age   Always       -       0
184 End-to-End_Error                                                 0x0032   100   100   099    Old_age   Always       -       0
187 Reported_Uncorrect                                               0x0032   100   100   000    Old_age   Always       -       0
188 Command_Timeout                                                  0x0032   100   100   000    Old_age   Always       -       0
189 High_Fly_Writes                                                  0x003a   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature_Cel                                          0x0022   065   059   040    Old_age   Always       -       35 (Min/Max 28/41)
191 G-Sense_Error_Rate                                               0x0032   100   100   000    Old_age   Always       -       0
192 Power-Off_Retract_Count                                          0x0032   100   100   000    Old_age   Always       -       1037
193 Load_Cycle_Count                                                 0x0032   100   100   000    Old_age   Always       -       1426
194 Temperature_Celsius                                              0x0022   035   041   000    Old_age   Always       -       35 (0 19 0 0 0)
195 Hardware_ECC_Recovered                                           0x001a   083   064   000    Old_age   Always       -       217194068
197 Current_Pending_Sector                                           0x0012   100   100   000    Old_age   Always       -       0
198 Offline_Uncorrectable                                            0x0010   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count                                             0x003e   200   200   000    Old_age   Always       -       0
240 Head_Flying_Hours                                                0x0000   100   253   000    Old_age   Offline      -       32309h+57m+30.384s
241 Total_LBAs_Written                                               0x0000   100   253   000    Old_age   Offline      -       91293876339
242 Total_LBAs_Read                                                  0x0000   100   253   000    Old_age   Offline      -       108719131478

Ist da etwas auffällig?
EDIT: ChatGPT sagt:

Die SMART-Daten der vier Festplatten zeigen, dass alle Festplatten in einem insgesamt stabilen Zustand sind, wobei keine schwerwiegenden Fehler vorliegen. Dennoch gibt es einige Punkte, die besonders beachtet werden sollten:

1. Raw Read Error Rate und Seek Error Rate
Festplatte 1 (ZCT31ACQ):
Raw Read Error Rate: 218,815,564
Seek Error Rate: 519,713,873
Festplatte 2 (ZCT312RA):
Raw Read Error Rate: 216,377,672
Seek Error Rate: 524,806,242
Festplatte 3 (ZCT311NW):
Raw Read Error Rate: 29,879,440
Seek Error Rate: 531,668,015
Festplatte 4 (ZCT31CM4):
Raw Read Error Rate: 217,194,068
Seek Error Rate: 547,940,885
Obwohl diese Werte sehr hoch erscheinen, ist es bei Seagate-Laufwerken typisch, dass die Werte für die Raw Read Error Rate und Seek Error Rate auf eine Art berechnet werden, die nicht direkt als Fehleranzahl interpretiert werden sollte. Solange der Wert und WORST über den Schwellenwerten (THRESH) liegen, ist das in Ordnung.

2. Power-On-Hours
Alle vier Festplatten haben 32.472 Betriebsstunden (ca. 3,7 Jahre durchgängige Laufzeit). Dies zeigt, dass sie bereits einen erheblichen Anteil ihrer Lebensdauer hinter sich haben, aber noch keine Fehler aufgrund des Alters zeigen.

3. Temperatur
Die Betriebstemperaturen der Platten liegen zwischen 35°C und 36°C, was in einem gesunden Bereich für Festplatten ist. Ein dauerhaftes Überschreiten von 40°C könnte jedoch die Lebensdauer beeinträchtigen.

4. Reallocated Sector Count
Keiner der Datenträger hat reallocated sectors (Wert ist 0), was ein sehr gutes Zeichen ist. Reallocated Sectors sind ein Hinweis auf physische Schäden auf der Festplatte.

5. Command Timeout
Festplatte 1 (ZCT31ACQ) hat einen erhöhten Wert bei Command Timeout (4,295,032,833). Dies kann auf ein Problem bei der Kommunikation mit dem System hinweisen. Es gibt jedoch keine Reported Uncorrect- oder Offline Uncorrectable-Sektoren, was positiv ist. Dennoch sollte dieser Wert beobachtet werden, da er ein potenzielles Risiko signalisiert.
Fazit:
Die Festplatten sind in einem guten Zustand und zeigen keine kritischen Fehler. Allerdings sollten die Betriebsstunden und der erhöhte Command Timeout-Wert bei Festplatte 1 (ZCT31ACQ) beobachtet werden. Regelmäßige Backups sind weiterhin wichtig, da der Alterungsprozess mit über 3 Jahren Betriebszeit fortgeschritten ist.

 

[Benie]

Auch aus meiner Sicht sind die HDDs soweit in Ordnung, ich denke die Ursache ist hier eher nicht zu finden.

Die ID 188 ist etwas Auffälig, da würde ich weiterhin beobachten, ob es sich verschlechtert

 

[ElaCorp]

Danke für eure Rückmeldung.
Ich hab einige Docker Container beendet. Anscheinend war da einer dabei. Mal schauen welcher genau das war. ICh schalte die jetzt mal nach und nach wieder ein.

 

[ctrlaltdelete]

HDD1: ID188 sieht merkwürdig aus, die ist bei allen anderen HDDs 0

 

[ctrlaltdelete]

@Benie ich glaube ID188 muss man nicht umrechnen?
Edit: @Benie Ich hatte das "nicht" vergessen, sorry

 

[Benie]

Hatte ich, deshalb hab ich sogar den Screenshot dazu gepostet

 

[ctrlaltdelete]

Mist, muss wohl doch umgerechnet werden:
https://github.com/AnalogJ/scrutiny/issues/522

 

[ctrlaltdelete]

Das ist auch interessant:
https://www.backblaze.com/blog/hard-drive-smart-stats/
Hier wird gesagt, dass ID188 pre-fail ist

 

[ElaCorp]

@ctrlaltdelete Ws genau ist interessant?
Bedeutet dies, dass diese Festplatte bald ausfällt? Dann besorg ich mir mal eine als Reserve.

 

[ctrlaltdelete]

Das würde ich so sehen, ja.

 

[ElaCorp]

Ich hatte Mitte 2023 die "Datenbereinigung" pausiert. Und dann vergessen. Als ich diese wieder aktiviert hatte, bei 14 TB dauerte es 2 Tage. Hat sich die Situation stark verbessert. Es war wirklich nur die Auslastung. Festplatten und Netzwerk und CPU langweilten sich. Was ist Auslastung, wenn alles andere kaum was macht? Auch der Durchsatz war minimal. Kann es sein, dass es die Docker Container im RAM waren? Ich hab insgesamt 12GB RAM und dieser war bei dauerhaft 70% Auslastung. Nun ist er mit den wieder aktivierten Containern nur noch bei 50%.

Ich hab dennoch einen größeren Speicher RAM Riegel bestellt, und werde den 8GB durch einen 12 GB ersetzen. (4 sind ja fest drin.)

Mal die Lage beobachten. Ich wollte hier für andere festhalten. "Datenreinigung" und RAM prüfen. Das hat bei mir geholfen.

 

[ctrlaltdelete]

Evtl. wurde da geswapped?
Wieso 12 und nicht 16 GB?

 

[ElaCorp]

Evtl. wurde da geswapped?

Was genau bedeutet das? Alles im Arbeitsspeicher drin?
Ich hab sogar noch 2 SSD als Cach über das Script aktiviert.

Wieso 12 und nicht 16 GB?

4 hat das Gerät bei liegferrung. 8 Habe ich damals gekauft, macht somit 12GB.
Nun nehme ich die 8 raus und stecke 16 rein. Ergeben dann 20GB.

 

[ctrlaltdelete]

https://wiki.ubuntuusers.de/Swap/
Du hast 8 gegen 12 GB geschrieben, deshalb fragte ich.

 

[ElaCorp]

Ich vermute, dass ich das Problem gefunden habe. Es war der selbst angelegte SSD Cache.
Ich kann den Bilder entnehmen, dass immer wenn der Chach auf 100% war, es das ganze Volume runtergezogen hat. So hatte ich große Probleme über SMB auf meine Videos zuzugreifen und in diesen zu spülen. Weil es für mehrere Sekunden immer wieder Aussetzer gab. Da kamen dann keine Daten vom NAS, weil die Auslastung auf 100% war.

Nun habe ich den Cache wieder entfernt und bin gespannt.



Vor allem diese zwei nun kommenden Fotos, zeigen deutlich, dass da wo der Cache auf 100% ist, die Gesamtauslastung auch auf 100% geht. Und genau diese Moment haben zu 3 bis 10 sekunden SMB pasue bedeutet.


zumindest mein Stand bis jetzt. ich werd das mal weiter beobachten. Würdet ihr das auch so bewerten? Oder wisst ihr noch mehr?

 

[maxblank]

Welches genaue Modell hast du als Cache genutzt?

 

[Benares]

Och nö, nicht schon wieder SSD-Cache, das bringt doch nichts.