DSM 6.x und darunter BTRFS (verschlüsselt) mit Raid5 erzeugt scheinbar extrem Pflege-Overhead

[lotek]

hallo, ich wollte fragen wer diesen Umstand auch schon bemerkt hat:

ich bin vor ca. 1 Jahr auf eine neue DS416play umgestiegen und dabei auf von ext4 auf BTRFS (Raid5, verschlüsselt und neu erstellt) gewechselt.
Jetzt auf eine DS918+ weil ich dachte 4 Cores würden BTRFS beflügeln.
Ich habe auch viele kleine Dateien auf dem Dateisystem.
Die Übertragungsperformance ist sehr gut. von 100mb/s bei grossen Dateien bis zu 40-60MB/s bei kleinen Dateien. Das passt.

Eigentlich fast immer wenn ich per smb auf die Freigabe zugreife, scheint zu Beginn des Zugriffs die DS das Dateisystem zu beschäftigen. Und zwar so dass ich nicht selten 1 Minute warten muss bis sich die DS beruhigt und ich das Verzeichnis zu sehen bekomme.

Irgendwann funktioniert es dann vernünftig. Aber dann machmal bei Neuanlegen eines Ordners dauert es wieder 10 sek oder es geht mal nix mit der Ordneranzeige für 10Sek. Die DS rödelt. Mit ext4 (verschlüsselt und als Raid5) habe ich sowas auf früher mit dem gleichem Datenbestand nie gehabt. Aktuell mit anderen Synology's auch nicht.

Das Upgrade auf eine DS918+ hat das Problem höchstens um 20% reduziert. Es nervt gewaltig, wenn man Urlaubsfotos bearbeiten will (Dateinamen-Änderung meine ich nur!). Vorallem wenn ich in Ordnern arbeite in denen viele kleine Dateien sind.
Vermutlich muss ich wieder zurück auf ext4. schade.

 

[dil88]

Danke für den Erfahrungsbericht! Wie ist die CPU-Last, wenn das Problem auftritt?

 

[lotek]

bin jetzt ein paar Minuten in typischen grossen Urlaubsfoto-Ordnern herumspaziert. manchmal ok, dann wieder 5-10 sekunden Pause..un HDD-Rödeln. die CPU langweilt sich. RAM auch wenig.
ich nehme jetzt mal einen Windows10-client, nicht dass das ein cif-client von meinem Linux-Notebook provoziert.

 

[dil88]

Ohne Skalierung ist die Grafik schwierig zu interpretieren. Wenn der Peak 25% darstellt und der limitierende Task single-threaded abläuft, dann könnte das Thema durchaus CPU-limitiert sein.

 

[lotek]

ja stimmt das war zu schnell. hier sieht man den Bereich deutlich, wenn ich so auf 6 verschiedene Ordner mit teilweise 100 Dateien und mehr zugreife.
Die Pausen sieht man auch.

Eigentlich kein grosse Aufgabe. vor mehr als einem Jahr mit einer einfachen ds413 (raid5, ext4, verschlüsselt, 32bit) alles kein Problem....seit BTRFS nervt es nur noch.

 

[lotek]

Interessant auch die folgende Grafik. und der Anstieg ist 3-5 Minuten nach dem Browsen durch Fotos. ca. 3-4 Minuten gab es Dateisystempflege oder was das sein soll.....omg. jetzt sind die 2 Grafiken wieder unter 1-5%...





4GB Ram sollten doch reichen. bei der DS416play hatte ich mal 8GB Ram drin, aber die war mit 2 cores phasenweise noch träger als die DS918+ mit 4GB Ram.

 

[Puppetmaster]

Nutzt du die PhotoStation, bzw. befinden sich die Bilder innerhalb der Freigabe /photo, die indiziert wird?

Hast du das Phänomen auch in anderen Ordnern mit anderen Dateiypen (i.e. keine Mediendaten)?

 

[mb01]

Was ich immer wieder feststelle, ist, dass gerade wenn Bilder involviert sind, häufig Hintergrundprozesse übelst reingrätschen. Guck mal auf die Auslastung vom Volume ... die CPU ist eigentlich eher selten das Problem.

Gerade neulich wieder einen Haufen normal großer JPEGs (~5-8 MB) auf die DS kopiert und der Speed krebste häufig im Bereich von 5 MB/s rum, wo eigentlich deutlich mehr drin sein müsste. Im Taskmanager tauchten immer wieder Indizierungdienste (mit max. 5% CPU-Auslastung), wobei die (pausierbare) Konvertierung für Photostation nicht aktiv war. Es machte eigentlich auch keinen Unterschied, ob ich die Bilder direkt in den Photostation-Ordner oder in irgendeinen anderen Ordner kopiert habe. Das Volume (916+, 3x 10TB SHR btrfs) war auch ohne Kopieren schon zu 60-70% ausgelastet. Mit Kopieren waren es dann 99%.

Ist ja irgendwie klar, dass die DS wissen muss, welche Dateien neu auf dem Laufwerk sind. Aber das schon bei Start des Kopierens gleich "Indizierungdienste" dermaßen reingrätschen, dass der Kopierspeed massiv leidet, ist meiner Meinung nach ein "Fail" von Synology. So etwas müsste man intelligenter lösen ... aber das regt mich jedes Mal auf, wenn ich Bilder auf eine Synology kopiere.

Ich hätte jetzt eigentlich vermutet, dass das andere, DSM-eigene Indizierungsdienste bei mir das Problem sind, und weniger btrfs, aber ich achte mal mehr drauf.

 

[lotek]

@ Puppetmaster
Nein, keine Photostation. Indiziert werden nur andere Order für Audio und Video.

@ an alle anderen:
was ich interessant finde ist, dass wenn ich über den file-explorer direkt auf der DS in die Ordner gehe, dann ist ALLES extrem schnell und ohen jegliche Verzögerung: d. bedeutet eigentlich es muss doch mit meiner SMB-Verbindung zu tun haben. evtl. habe ich falsche smb-Einstellungen.
von Linux-PC gehe ich mit smb3.02 auf die DS. das wird mir auf der DS auch bestätigt mit "smbtatus".
ich versuche das mal mit einem win10-PC genauer zu vergleichen.

Evtl. lege ich die Fotos mal in einen nicht verschlüsselten Ordner.

schon mal danke für die Anteilnahme.