PetaSpace/PetaVolume Alternative

[TopperHarley101]

Hallo Leute,
ich stehe vor einem Problem bei dem ich gerne mal euer Schwarmwissen und die gesammelten Erfahrungen benötigte.
Ich habe folgendes Scenario: Ein RS4017+ mit 2 Erweiterungen mit jeweils 12 Laufwerken. DSM7.1. 2x 10G Netzwerk Anbindung.
Hierrauf sind 3 Speicherpools mit jeweils 1 Volume erstellt.
1. Haupteinheit Raid 5 15x20TB. Laufwerk 16 ist HotSpare
2. Erweiterung 1 Raid 5 11x20TB. Laufwerk 12 ist Hotspare
3. Erweiterung 2 Raid 5 11x20TB. Laufwerk 12 ist HotSpare

Die anforderung ist Netzwerkspeicher für alle Kollegen bereit zu stellen. Aufgeteilt nach Jahren. Wobei Aktuelle Daten dazu kommen und ältere nach und nach wieder gelöscht werden sobald sie eine gewisse Zeit alt sind. Allerdings überschreitet die Datenmenge der aktuellen Freigabe (2022) die 200TB Volumegrenze bei weitem.

Deshalb griff ich zum PetaSpace. 5 Freigaben (2023, 2022, 2021, 2020, 2019) verteilet über alle 3 Speicherpools/Volumes.

Das klappt eigentlich super, während 2023 bereits langsam gefüllt wird, leert sich 2019 und 2020 und gibt wieder speicherplatz frei. Die speicherung der Daten ist schön dynamisch.

Mit einem Problem, das System ist mega langsam geworden. Die Kollegen arbeiten an den sich auf dem NAS befindlichen Daten. Oft sind es auch viele kleine Dateien. Hier ist der zugriff besonders langsam. So wird es natürlich auch von Synology als Eigenschaft des Petaspace/Petavolume beschrieben. Hätte nur nicht gedacht das es so schlimm ist.

Ich muss mich also vom Petaspace trennen und wieder zur normalen Freigabe wechseln. Nur wie realisier ich die neue Ordnerstruktur am besten?!

Allein die Freigabe 2022 überschreitet die 200TB grenze für ein Volume. Hingegen sind 2020 und 2019 viel kleiner und Verschwinden in den nächsten Monaten fast ganz. 2023 wiederum wird im nächsten Jahr ebenfalls die 200TB Größe überschreiten. 2021 bekommt aber immernoch wenige Daten hinzu und andere werden gelöscht. usw...

Ich hoffe ihr könnt mir einigermaßen folgen und versteht mein Problem mit der Freigabe und Ordnerstruktur.

Gibt es eine Möglichkeit Dynamische Freigaben zu erstellen? Eine Freigabe über 2 Volumes zb.

Über Tipps und Anregungen würde ich mich sehr freuen.

(Die Anschaffung eines Neuen Systems ist leider keine Option. )

 

[synfor]

Unterteile deine Strukturen feiner, so dass du sie besser auf die 200 TB-Volumen verteilen kannst.

 

[TopperHarley101]

Ich weiss was du meinst, ist in meinem Fall aber leider nicht so einfach möglich.

Ich hatte schon die Idee automatisiert Daten von einem Ordner/Volume in eine Art Archiv Ordner (anderes Volume) zu verschieben. Nur dann habe ich mehrfache Freigaben über die gleichen Jahreszahlen was ich der Übersichtshalber vermeiden möchte.

 

[synfor]

Um eine feinere Unterteilung (z. B. Quartale oder Monate) wirst du nicht drumherum kommen, wenn dir Peta Space zu langsam ist. Die maximale Volumengröße bei Synology ist nun mal 200 TB. Für Btrfs (Peta Volume) hast du leider das falsche Modell. Wobei auch damit gilt: "Nicht empfohlen: Speichern von Anwendungen, die schnellen oder direkten Zugriff erfordern."

Mit DFS[1][2] kannst du deine alte Struktur parallel weiterführen und die Freigaben der feineren neuen Struktur ausblenden.

 

[TopperHarley101]

Nach langem Überlegen bin ich nun zu folgendem Schluss gekommen:
Speicherpool1 - Freigaben 2019,2020,2021,2022...
Speicherpool2 - Freigabe 4_Monate_alt Unterordner 2019,2020,2021,2022...
Speicherpool3 - Freigabe 8_Monate_alt Unterordner 2019,2020,2021,2022...
Die Kollegen legen neue Dateien in Speicherpool1 ab.
Per Aufgabenplanung und Skript werden 1 mal die Woche Dateien die 4 Monate nicht verändert wurden auf Speicherpool2 verschoben.
Und nach weiteren 4 Monaten auf Speicherpool3. Nach insg. einem Jahr werden sie nach händischer prüfung gelöscht.

Es gibt bestimmt andere wege und möglichkeiten aber für mich passt das so.

Sind neuere NAS Modelle performanter in Bezug auf Petaspace?