AvrLogger : Thermallogger und Visualisierung Tool

[peterhoffmann]

- Wie oft würdest du die Werte kontrollieren.
Gefühlt würde ich sagen, dass 1-2 pro Tag doch reichen sollte.
- Welche Werte / Attribute machen Sinn.
Genau hier liegen die Probleme. Das ist ja leider irgendwie gar nicht genormt. Jeder kocht sein Süppchen. Ich hänge mal unten die Smartwerte einer WD Red 6TB und einer 1TB Samsung SSD an. Wenn dann noch jemand Seagate und Co. anhängt, sehen wir den Zahlen- und Buchstabensalat.
- Welche Grenze darf der Wert in welcher Zeit überschreiten.
Das hängt vom Attribut ab. Der Wert für Raw_Read_Error_Rate ist zwar wichtig, aber weniger wichtig wie der Wert für Multi_Zone_Error_Rate oder Current_Pending_Sector. Bei SSDs kommt u.a. der Wear_Leveling_Count hinzu.
- Gegen einen Festen Wert prüfen oder Veränderung innerhalb eines Zeitraumes.
Beim ersten Starten auf einen festen Wert, danach auf Veränderung.
- Wie groß sollte der Zeitraum sein (wählbar?)
Ich würde da zu wenigen Wochen tendieren.

Die vielen verschiedenen Platten, Hersteller und die daraus sich ergebenen Attribute und Werte machen wohl am meisten Kopfschmerzen.

WD Red 6TB:

  1 Raw_Read_Error_Rate                                              0x002f   200   200   051    Pre-fail  Always       -       0
  3 Spin_Up_Time                                                     0x0027   186   184   021    Pre-fail  Always       -       9691
  4 Start_Stop_Count                                                 0x0032   095   095   000    Old_age   Always       -       5161
  5 Reallocated_Sector_Ct                                            0x0033   200   200   140    Pre-fail  Always       -       0
  7 Seek_Error_Rate                                                  0x002e   200   200   000    Old_age   Always       -       0
  9 Power_On_Hours                                                   0x0032   090   090   000    Old_age   Always       -       7858
 10 Spin_Retry_Count                                                 0x0032   100   100   000    Old_age   Always       -       0
 11 Calibration_Retry_Count                                          0x0032   100   100   000    Old_age   Always       -       0
 12 Power_Cycle_Count                                                0x0032   096   096   000    Old_age   Always       -       4981
192 Power-Off_Retract_Count                                          0x0032   200   200   000    Old_age   Always       -       5
193 Load_Cycle_Count                                                 0x0032   199   199   000    Old_age   Always       -       5165
194 Temperature_Celsius                                              0x0022   114   109   000    Old_age   Always       -       38
196 Reallocated_Event_Count                                          0x0032   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector                                           0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable                                            0x0030   100   253   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count                                             0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate                                            0x0008   100   253   000    Old_age   Offline      -       0

Samsung SSD 1TB:

  5 Reallocated_Sector_Count                                         0x0033   100   100   010    Pre-fail  Always       -       0
  9 Power-on_Hours                                                   0x0032   099   099   000    Old_age   Always       -       5002
 12 Power-on_Count                                                   0x0032   099   099   000    Old_age   Always       -       942
177 Wear_Leveling_Count                                              0x0013   099   099   000    Pre-fail  Always       -       3
179 Used_Reserved_Block_Count_(total)                                0x0013   100   100   010    Pre-fail  Always       -       0
181 Program_Fail_Count_(total)                                       0x0032   100   100   010    Old_age   Always       -       0
182 Erase_Fail_Count_(total)                                         0x0032   100   100   010    Old_age   Always       -       0
183 Runtime_Bad_Count_(total)                                        0x0013   100   100   010    Pre-fail  Always       -       0
187 Uncorrectable_Error_Count                                        0x0032   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature                                              0x0032   068   058   000    Old_age   Always       -       32
195 ECC_Error_Rate                                                   0x001a   200   200   000    Old_age   Always       -       0
199 CRC_Error_Count                                                  0x003e   100   100   000    Old_age   Always       -       0
235 POR_Recovery_Count                                               0x0012   099   099   000    Old_age   Always       -       1
241 Total_LBAs_Written                                               0x0032   099   099   000    Old_age   Always       -       3976475326

 

[AndiHeitzer]

Ich hätte hier noch eine 8TB IronWolfe im Angebot

ID# ATTRIBUTE_NAME                                                   FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate                                              0x000f   080   064   044    Pre-fail  Always       -       90971795
  3 Spin_Up_Time                                                     0x0003   085   084   000    Pre-fail  Always       -       0
  4 Start_Stop_Count                                                 0x0032   100   100   020    Old_age   Always       -       117
  5 Reallocated_Sector_Ct                                            0x0033   100   100   010    Pre-fail  Always       -       192
  7 Seek_Error_Rate                                                  0x000f   096   060   045    Pre-fail  Always       -       4027753022
  9 Power_On_Hours                                                   0x0032   083   083   000    Old_age   Always       -       14908
 10 Spin_Retry_Count                                                 0x0013   100   100   097    Pre-fail  Always       -       0
 12 Power_Cycle_Count                                                0x0032   100   100   020    Old_age   Always       -       96
184 End-to-End_Error                                                 0x0032   100   100   099    Old_age   Always       -       0
187 Reported_Uncorrect                                               0x0032   099   099   000    Old_age   Always       -       1
188 Command_Timeout                                                  0x0032   100   100   000    Old_age   Always       -       0
189 High_Fly_Writes                                                  0x003a   100   100   000    Old_age   Always       -       0
190 Airflow_Temperature_Cel                                          0x0022   056   047   040    Old_age   Always       -       44 (Min/Max 39/46)
191 G-Sense_Error_Rate                                               0x0032   094   094   000    Old_age   Always       -       13177
192 Power-Off_Retract_Count                                          0x0032   100   100   000    Old_age   Always       -       530
193 Load_Cycle_Count                                                 0x0032   100   100   000    Old_age   Always       -       728
194 Temperature_Celsius                                              0x0022   044   053   000    Old_age   Always       -       44 (0 23 0 0 0)
195 Hardware_ECC_Recovered                                           0x001a   030   001   000    Old_age   Always       -       90971795
197 Current_Pending_Sector                                           0x0012   100   100   000    Old_age   Always       -       0
198 Offline_Uncorrectable                                            0x0010   100   100   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count                                             0x003e   200   200   000    Old_age   Always       -       0
240 Head_Flying_Hours                                                0x0000   100   253   000    Old_age   Offline      -       14827 (39 135 0)
241 Total_LBAs_Written                                               0x0000   100   253   000    Old_age   Offline      -       78364846562
242 Total_LBAs_Read                                                  0x0000   100   253   000    Old_age   Offline      -       110172629492

Es ist auch schön zu erkennen, dass Seagate gerne mit 'Phantasie-Zahlen' arbeitet, die erst zurechtgerückt werden müssen.

 

[peterhoffmann]

Bei Seagate sieht man schön die ersten Probleme. Werte fehlen bzw. es gibt andere und manche Werte muss man erst noch umrechnen um überhaupt einen belastbaren und ehrlichen Wert zu erhalten.

 

[BigRonin]

AvrLogger im neuem Gewand

… es ist ein bisschen her seit der letzten Ankündigung.

Ich war aber nicht untätig, ganz im Gegenteil. Ich bin viele der hier genannten Punkte angegangen.
Daraus ist schon fast ein neues AvrLogger geworden.

Noch ist der letzte Punkt, Festplatten überwachen, nicht final fertig … ABER ich finde ich bin schon soweit das ich eine BETA AvrLogger-noarch-v2.0.3-000 - BETA.spk auf meinem Server abgelegt habe. Zusammen mit dem SPK liegen auch eine Handvoll Bilder da.

Es gibt vieles neues:

- So hat das Hauptfenster keine Menü-Leiste mehr. Das Icon für den Menüaufruf verbirgt sich in der linken, oberen Ecke und erscheint wenn die Maus drüber steht.


- Alle Einstellungen geschehen in einem separaten Fenster, das sich öffnet, wenn man auf das Setup-Icon geklickt hat.
- Es können beliebig viele Instanzen von AvrLogger aufgerufen werden. Browser- / PC-übergreifend. Egal in welcher Instanz Änderungen vorgenommen werden, sie werden in allen Instanzen übernommen, bzw. dass Liniendiagram aktualisiert.
- Das Hauptfenster von AvrLogger bleibt „immer“ offen. Änderungen können so „sofort“ gesehen werden.
- Der aktuell gewählte „Menu-Tab“ bleibt auch nach einer Klicke auf „Speichern“ offen.
- Alle „Popup-Fenster“ einer Instanz werden geschlossen, wenn AvrLogger beendet wird.

Ach ja … das Wichtigste: Ein neuer Tab „System“ - Dort können zu „allen“ Festplatten die Informationen abgerufen werden und Einstellungen für eine Überwachung der kritischen Festplattenparameter getätigt werden (alle Einstellungen sind soweit fertig, nur die eigentliche Überwachungsfunktion ist noch in Arbeit).
- Im Tab „System“ kommen nach und nach weiter Funktionen hinzu.

Bin gespannt auf Feedback.

 

[peterhoffmann]

Ich bin beeindruckt von der Menge an Veränderungen und neuen Funktionen.

Auf meinem Produktivsystem läuft im Moment noch 1.x. Für die v2 war ich dort bisher zu faul.
Auf meinem zweiten System läuft die 2.x, klaglos.
Am Wochenende installiere ich die Beta von dir auf dem zweiten System und schaue mir alles an.

 

[Kurt-oe1kyw]

Auf meiner Testmaschine (Realtek CPU) installiert, startet, läuft.
schaut auf den ersten Blick gut aus:


Der Pfeil ist bei mir noch nicht anklickbar, obwohl das "Hand"-Icon kommt:


ahhh, das ist gewöhnungsbedürftig, man muss auf den Text drunter klicken und nicht auf den Pfeil!


Gefällt mir sehr gut, abermals VIELEN DANK für deine unermüdliche Arbeit mit dem AvrLogger.

Bitte nicht wundern, das ist eine uralte Testplatte mit Sektorfehlern, aber sie läuft und läuft und läuft

Edit:
Ich habe den USB Stecker von der USV direkt an die Testmaschine angesteckt (normalerweise erhält diese die Daten über USV Server von der Haupt-DS):



Ich bin dann schon gespannt welche Daten von der USV später in der Grafik vom AvrLogger ausgewählt werden können


im Register "Linien", da werden bei mir derzeit die beiden Schaltflächen "Save" und "Undo" nicht angezeigt:



ich kann also etwaige Änderungen nicht Übernehmen, da die Schaltfläche "Save" fehlt.

 

[BigRonin]

... hast du mal versucht den CSS-Cache von deinem Browser zu löschen? ... in Firefox geht das mit Ctrl+Shift+R

Denn der Hintergrund bei USB sollte so aussehen :

 

[BigRonin]

Ich hab einen Tipp von Tante „google“ eingebaut, welches im html-header die CSS-Dateien mit einem TimeStamp versieht:

<link rel="stylesheet" type="text/css" href="css/style.css?v=20200612073701" />

Ich hoffe damit wird der Browser gezwungen die CSS im Cache zu aktualisieren (nur beim ersten Start)
Das SPK auf dem Server habe ich aktualisiert (Version ist gleichgeblieben).

... dann sollten die Abschnittestrenner so aussehen:

 

[Kurt-oe1kyw]

Perfekt, ja jetzt ist die Anzeige ident mit deinen Bildern. Also beim FF hat es gleich funktioniert.
Nur zur Sicherheit, unter "Linien" fehlt aber immer noch die Schaltfläche SAVE und UNDO rechts unten um die Einstellungen auch zu übernehmen.
Also im Augenblick kann ich auch mit der aktualisierten Version in "Linien" nichts ändern oder umstellen, dh. das geht noch, aber weil "SAVE" fehlt wird es nicht übernommen und wird daher auch nicht aktiv.
Ansonsten schaut es gut aus.

 

[BigRonin]

Schau doch bitte mal im LOG ob da was auffälliges drin steht.

 

[Kurt-oe1kyw]

Ja,

Traceback (most recent call last):
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/AvrLogger.cgi", line 170, in <module>
    sNext = cgi_main.main ( mainpage, site, more )
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/gui/cgi_main.py", line 62, in main
    sNext = main.main()
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/gui/cgi_lines.py", line 108, in main
    if Out['PlotUsvLoadOn'] :     Options ( 'UsvLoadOn', 'USV Load :' )
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/gui/cgi_html.py", line 251, in Options
    Switch    ( 'Plot' + key + 'On',      text,                                                              Column_1 )
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/gui/cgi_html.py", line 525, in Switch
    if 'Yes' in Out[key]: checked = " checked "
KeyError: 'PlotUsvLoadOnOn'
Traceback (most recent call last):
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/AvrLogger.cgi", line 170, in <module>
    sNext = cgi_main.main ( mainpage, site, more )
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/gui/cgi_main.py", line 62, in main
    sNext = main.main()
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/gui/cgi_config.py", line 257, in main
    Switch   ( 'StatusMailDiskOn',  'Disk:',            45 )
  File "/usr/syno/synoman/webman/3rdparty/AvrLogger/gui/cgi_html.py", line 534, in Switch
    print ( '                        <span class="onoffswitch-switch"></span>' )
: [Errno 32] Broken pipe

Ich weiß jetzt aber nicht ob das nicht daher kommt, weil die USV an der Haupt-DS hängt via USB und die Testmaschine hier die Daten vom "USV-Server" (=Haupt-DS) bekommt?
Habe jetzt wieder umgesteckt und die USV hängt jetzt via USB direkt an der Testmaschine.
So wie das ausschaut läuft dabei das Errorlog NICHT mehr weiter.

 

[BigRonin]

Hmmm … ok.

Also, AvrLogger ist es egal wo die USV angesteckt ist. AvrLogger erkennt ob die DiskStation, in Bezug auf USV, ein Server oder Client ist.

Offensichtlich kommt AvrLogger jedoch nicht damit zu Recht wenn sich das ändert … also vom Client zum Server oder umgekehrt. Damit habe ich nicht gerechnet.

Ich schau mal wie ich das fixen kann.

Du könntest jedoch mal probieren was passiert wenn du nach dem Umstecken AvrLogger mal anhältst und wieder startest.

 

[BigRonin]

Hab das SPK auf dem Server aktualisert, bitte probieren

 

[Kurt-oe1kyw]

Du bist einmalig Spitze!

Das schaut sehr gut aus, keine error Einträge im Log:

2020.06.12 14:26:05 PKG: AvrLogger was stopped by DSM ...
---------------------------------------------------------------------------------
2020.06.12 14:26:05 PreUpgrade: from v2.0.3-000 ...
2020.06.12 14:26:05 PreUpgrade: Settings successfully saved for reuse
2020.06.12 14:26:06 PreUninst : UPGRADE is being prepared ...
2020.06.12 14:26:06 PreUninst : Symbolic link in 3rdparty deleted
---------------------------------------------------------------------------------
2020.06.12 14:26:06 PreInst   : Preparing UPGRADE v2.0.3-000
2020.06.12 14:26:07 PostInst  : UPGRADE v2.0.3-000
---------------------------------------------------------------------------------
2020.06.12 14:26:07 PostInst  : Reuse "/etc"
2020.06.12 14:26:07 PostInst  : Config "log.conf" updated
2020.06.12 14:26:07 PostInst  : Use of "Shared Memory" is enabled
2020.06.12 14:26:07 PostInst  : Config "Default.cnf" created
2020.06.12 14:26:07 PostInst  : Config "schedule.conf" created
2020.06.12 14:26:07 PostInst  : Symbolic link in 3rdparty created
---------------------------------------------------------------------------------
2020.06.12 14:26:07 AvrLogger v2.0.3-000 UPGRADE successful.
---------------------------------------------------------------------------------
2020.06.12 14:26:10 PKG: AvrLogger was started by DSM ...

Die Grafik beginnt die Belastung der USV in % bereits anzuzeigen:



Anzeige ist auch korrekt, meine USV ist aktuell um die 23% ausgelastet.
DANKE für deine Arbeit!

Ich hatte zur Sicherhei die USV mit USB direkt an der Testmaschine.
Ich steck jetzt mal um auf die Haupt-DS und probier ob da trotzdem noch Daten auf die Testmaschine kommen.

 

[BigRonin]

Super

Ich bin ja sowas von neidisch auf deine Auslastungsanzeige der USV meine liefert diesen Wert leider nicht.

 

[Kurt-oe1kyw]

ah ok, ich dachte die liefern so alle die gleichen Daten?

Ich habe jetzt den USB Stecker von der USV wieder in die Haupt-DS gesteckt.
Die Grafik dürfte weiterlaufen, aber da ist jetzt ein Eintrag im Log, auch nachdem ich AvrLogger angehalten und neu gestartet hatte:

2020.06.12 14:45:12 SYS : Unexpected change in UPS support detected.
2020.06.12 14:45:12 SYS : A new initialization is carried out.
Exception ignored in: <_io.TextIOWrapper name='' mode='w' encoding='UTF-8'>
BrokenPipeError: [Errno 32] Broken pipe
Exception ignored in: <_io.TextIOWrapper name='' mode='w' encoding='UTF-8'>
BrokenPipeError: [Errno 32] Broken pipe
2020.06.12 14:55:23 PKG: AvrLogger was stopped by DSM ...
2020.06.12 14:57:00 PKG: AvrLogger was started by DSM ...
Exception ignored in: <_io.TextIOWrapper name='' mode='w' encoding='UTF-8'>
BrokenPipeError: [Errno 32] Broken pipe

Aber eventuell liegt es auch daran dass ich die DS nicht neu gestartet hatte?
Kann ich gerne machen, ist nur die Testmaschine.

Der Alarm funktioniert auf jeden Fall, ich bekomme im DSM rechts unten die Warnung eingeblendet als Fenster wenn der Wert X überschritten wird/wurde, also Belastung der USV in %.

Und die Email geht auch hinaus:

Sehr geehrter Benutzer,

Sie erhalten diese Mail weil:

?- "USV Load" den Schwellenwert 15.0% mit 25.0% überschritten hat.
Mit freundlichen Grüßen,
ihre XXXXXXXXXXX-DiskStation

XXXXX von mir geändert, da steht korrekt der Servername der DS.

Die 15% habe ich für Testzwecke so tief gesetzt, Praxistauglich wäre hier vermutlich ein Wert zwischen 85 und 90%.

 

[BigRonin]

2020.06.12 14:45:12 SYS : Unexpected change in UPS support detected.
2020.06.12 14:45:12 SYS : A new initialization is carried out.

Das ist die Meldung die ich jetzt erwartet habe nachdem du die USV umgesteckt hast.

Die anderen :

Exception ignored in: <_io.TextIOWrapper name='' mode='w' encoding='UTF-8'>
BrokenPipeError: [Errno 32] Broken pipe

treten gelegentlich auf. Die sind unkritisch aber ich bekomme sie bislang nicht zuverlässig unterdrück.

Aber eventuell liegt es auch daran dass ich die DS nicht neu gestartet hatte?
Kann ich gerne machen, ist nur die Testmaschine.

Nein ... das ist nicht notwendig

 

[Kurt-oe1kyw]

Alles klar, so wie ich das Verstehe hat AvrLogger das "Umstecken" registriert und daraufhin selbstständig neu initialisiert.
Wenn ich noch etwas Testen soll, einfach Bescheid sagen.

Wenn dein USV Modell die Belastung in % nicht ausgibt, lässt du dir dann die Belastung in W (Watt) anzeigen, oder kommt der Wert bei dir auch nicht.
Im Moment habe ich 2 Einstellmöglichkeiten:
USV Load und USV Discharged
Also Belastung der USV in % Angabe und Batterieentladung, da ich hier keine Linie in der Grafik sehen kann, gehe ich davon aus, dass ein vollgeladener Akku mit 100% Anzeige also mit der Grafik ganz unten bei der Null-Linie ist, da ja der Akku 0% entladen ist, dh. bei 60% Restakku sollte die Grafik dann irgendwo bei 40% aufscheinen. Korrekt?

Die Linie mit der aktuellen Belastung mit ~ 24% wird ja schon korrekt angezeigt.

 

[BigRonin]

Also Belastung der USV in % Angabe und Batterieentladung, da ich hier keine Linie in der Grafik sehen kann, gehe ich davon aus, dass ein vollgeladener Akku mit 100% Anzeige also mit der Grafik ganz unten bei der Null-Linie ist, da ja der Akku 0% entladen ist, dh. bei 60% Restakku sollte die Grafik dann irgendwo bei 40% aufscheinen. Korrekt?

Ja, genau. Eine 100% Line macht nach meinem Dafürhalten in der Grafik keinen Sinn, deswegen diese Logik Und auch nur so kann AvrLogger unter "Alarm" einen Schwellenwert berücksichtigen.

Wenn dein USV Modell die Belastung in % nicht ausgibt, lässt du dir dann die Belastung in W (Watt) anzeigen, oder kommt der Wert bei dir auch nicht.

Meine USV liefert leider "nur" den Wert für Ladeszustand des Akkus.
Auf dem Display der USV kann ich alle Werte sehen: Belastung in Watt, Eingangsspannung in Volt und einiges mehr.
Wie gesagt werden die leider nicht per USB weitergereicht.

 

[Kurt-oe1kyw]

ah ok, verstehe.

Ich habe jetzt die Backup DS hochgefahren mit Intel CPU.
Läuft einwandfrei dort:

2020.06.12 15:39:52 PreUpgrade: from v2.0.2-005 ...
2020.06.12 15:39:52 PreUpgrade: Settings successfully saved for reuse
2020.06.12 15:39:52 PreUninst : UPGRADE is being prepared ...
2020.06.12 15:39:52 PreUninst : Symbolic link in 3rdparty deleted
---------------------------------------------------------------------------------
2020.06.12 15:39:52 PreInst   : Preparing UPGRADE v2.0.3-000
2020.06.12 15:39:53 PostInst  : UPGRADE v2.0.3-000
---------------------------------------------------------------------------------
2020.06.12 15:39:53 PostInst  : Reuse "/etc"
2020.06.12 15:39:53 PostInst  : Config "log.conf" updated
2020.06.12 15:39:53 PostInst  : Use of "Shared Memory" is enabled
2020.06.12 15:39:53 PostInst  : Config "Default.cnf" created
2020.06.12 15:39:53 PostInst  : Config "schedule.conf" created
2020.06.12 15:39:53 PostInst  : Symbolic link in 3rdparty created
---------------------------------------------------------------------------------
2020.06.12 15:39:53 AvrLogger v2.0.3-000 UPGRADE successful.
---------------------------------------------------------------------------------
2020.06.12 15:39:55 PKG: AvrLogger was started by DSM ...
2020.06.12 15:39:56 SYS: Number of values in the DataBase does not match the expected "37"
2020.06.12 15:39:56 SYS: DataBase has been updated.