Photo Station Ich verzweifle mit dem Synology Photo Station Uploader

[iOOi]

.

Hallo

Bei einigen hunderttausend Fotos mag das Tool ja noch handhabbar sein.
Ich habe allerdings sehr viel mehr hochauflösende Fotos. Kurze Videos (auch 4k) sind auch immer wieder dabei.
Das ganze in einer komplexen Ordnerstruktur.

Zuerst habe ich mit einem starken Win Desktop (i7) alles auf ein Mal hochladen wollen. Alle Kerne des Rechners waren mehrere Tage zu 100% ausgelastet. Mit dem Gerät konnte man also nichts anderes anfangen. Dann nach dem 6ten Tag stürzte der Synology Photo Station Uploader ab. Also habe ich ihn wieder angestartet, wobei er bereits hochgeladene Dateien überspringen soll. Das Wort "bereits" hat Synology überigens vergessen.

Sehr lästig: Die Frage nach der Videoauflösung kommt erst nach vielen Stunden. Beantwortet man sie nicht, steht der Vorgang. Man muss also immer wieder nachschauen, ob sich der Synology Photo Station Uploader endlich bequemt die Frage zu stellen, die sowieso immer mit dem vorgegebenen Wert beantwortet wird. :-(

Die Fortschrittsanzeige ist fehlerhaft: Der Uploader zeigt einen viel zu hohen Fortschritt an.


Mittlerweile habe ich seit 4 Wochen 4 Win Computer 24h durchlaufen, wobei sich jeder einen Teilbereich vor nimmt. Einen Mac hätte ich noch, doch der Synology Photo Station Uploader will keine Verbindung zum NAS aufnehmen. Das Anlegen des Profils klappt schon nicht.

Ständig stürzt Synology Photo Station Uploader ab, oder meldet nach Tagen, dass es plötzlich keine Verbindung zum NAS herstellen kann, obwohl ich über den betroffenen Rechner sehr wohl auf's NAS zugreifen kann.

Saublöd: Die hochgeladenen Dateien haben das Datum des Hochladens, nicht der Erstellung. Die Option das Datum als Filenamen zu verwenden habe ich nicht, da ich zigtausend Fotos individuelle Namen gegeben habe. Ob ich mittels Win-Explorer dann einfach noch mal alle Dateien aufs NAS kopieren und dort überschreiben kann, damit das Datum wieder stimmt und die Verknüpfung zu den Metadaten erhalten bleibt, habe ich noch nicht probiert.

Dem schwachbrüstigen Prozessor im NAS die Erstellung der Metadaten anzuvertrauen geht auch nicht, der wäre vermutlich Jahre lang damit ausgelastet.

Offenbar ist die Synology Photo Station unbrauchbar, wenn man viele Fotos hat. :-(

Tipps?

LG
iOOi

 

[Puppetmaster]

Offenbar ist die Synology Photo Station unbrauchbar, wenn man viele Fotos hat. :-(

Viel ist ja immer relativ. Ich behaupte mal, du hast einfach gigantisch viel Fotomaterial.

Bevor man hier ernsthaft Tipps geben kann solltest du aber noch kundtun, welchen Zweck du eigentlich verfolgst. Sollen die Fotos lediglich (in Gänze) eine Onlinepräsenz bekommen? Oder möchtest du sie zudem (professionell) verwalten oder gar bearbeiten?

Min. bei den letzten beiden Punkten ist die Photostation raus - schrieb ich ja auch schon an anderer Stelle.

 

[ottosykora]

früher stand in der Beschreibung der Photo Station es sei dazu da um ausgewählte Bilder auf einfache Art ins Netz zu stellen.
Dann hat Synology Moments lanciert und weil das bis jetzt wohl noch weit hinter der PS hinkt, wurde plötzlich die Beschreibung zu der PS überarbeitet und es steht drin was für professionelle Fotografen ....
Nur was man darunter versteht weiss ich nicht so genau. Finde diese Beschreibung nicht ganz korrekt. Vor Jahren haben Leute schon 30 000 Bilder damit verarbeitet und das war ziemlich zeitaufwendig.
Kürzlich wollte jemand wohl 800 000 Bilder, vermutlich im heutigem Format und Grösse hochladen. Das geht wahrscheinlich nicht. Habe mal gelesen der Uploader klemmt bei 10 000 Bildern.
Also in Portionen von 10000 hochladen.

Die Umrechnung der Bilder ist nötig, weil Leute die Bilder auf PC, Smartphone und so was anschauen. Wenn man das nicht will, sondern nur Bilder lagern ohne sie mit x-verschiedenen Geräten anschauen zu können, dann braucht man die PS nicht. Man leget einen Ordner auf der DS an und fertig.
Aber wenn jemand meint 100 000 Bilder auf dem Smartphone von unterwegs anschauen zu müssen, dann muss man halt Geduld haben oder irgendeinen Trockeneis gekühlten Game-PC dafür nehmen.

 

[iOOi]

Ich habe knapp unter 10^6 Fotos.
Zum Bearbeiten verwende ich Photoshop.

Ich möchte Synology Photo Station dazu verwenden Fotos einzelnen Freunden die bei gemeinsamen Aktionen dabei waren, einfach zur Verfügung zu stellen.

 

[iOOi]

Noch ein Problem des Synology Photo Station Uploaders:

Er füllt den temporären Ordner in Appdata des hochladenden Users mit zig GB an Daten an.
Einer der Rechner mit dem ich hochlade hat eine kleine SSD Systemplatte. Die wird ständig voll gefüllt. Dann stürzt FFmpeg offenbar bei jedem Versuch ein Video zu verarbeiten ab. Wenn ich mir den Rechner am nächsten Tag anschaue, gibt es hunderte offene Fenster mit Absturzmeldung.

Ob die Daten richtig verarbeitet wurden, wenn die Systemplatte voll ist, weiß ich nicht. Der Synology Photo Station Uploader selber gibt keine Fehlermeldung aus.

Ich habe den Eindruck, dass Synology ihren Photo Station Uploader nicht getestet hat.

 

[Puppetmaster]

Ich bleibe dabei: das ist zu viel für die PhotoStation. Knackpunkt ist ja mindestens einmal das initiale Hochladen/Berechnen der Fotos. Das wird ewig dauern und die Ressourcen auslasten.
Für jedes Bild und jedes Video werden Vorschauen errechnet (verschiedener Größe), das kostet Rechenpower und auch noch Speicherplatz.

Ganz ehrlich: das würde ich mir nicht antun.

Ziemlich viele Freunde, mit ziemlich vielen gemeinsame Aktionen...

 

[Puppetmaster]

Ich habe den Eindruck, dass Synology ihren Photo Station Uploader nicht getestet hat.

Haben sie bestimmt, aber nicht mit 10^6 Bildern/Videos. Das ist einfach (much) too much.

 

[iOOi]

Daher nutze ich auch die Rechenleistung von mehreren flotten Desktops und einem Laptop gleichzeitig, und nicht die schwachbrüstige CPU im NAS.

Die ist sowieso fast durchgehend zu 100% ausgelastet, da sie seit Wochen Tag und Nacht einen Index erstellt. Manchmal wird sie fertig, um dann bald wieder automatisch zu beginnen. Insgesamt befinden sich zig Millionen Dateien am NAS. Wenn dann noch ein Backup läuft, kann ich praktisch nicht mehr über SMB auf's NAS zugreifen. Das Volume ist auch meist zu 100% ausgelastet, während sich die flotten HDDs langweilen.

Langsam vermute ich, dass die DS918+ mit 2 Stück M.2 Cach SSDs und 40TB HDDs ein Fehlkauf war. :-(
Ich fürchte, sie taugt mit der viel zu schwachen CPU nur als Backupziel.

Ich würde gerne mal testen, ob DSM auf einer flotten Hardware brauchbar läuft.

 

[Puppetmaster]

Kann man schwer beurteilen, wenn man so gar nicht weiß, was du denn mit der DS eigentlich so machen willst.

Fotos mit Freunden teilen ist jedenfalls bei 95% der User kein Problem, nur hat da halt keiner 'ne Million Medien in der PS.

Die Performance der DS wird durch die PS extrem in den Keller gerissen, liegt zum einen an der Konvertierung, und natürlich auch an der Indexierung.
Wenn die DS irgendwann einmal mit der Masse an Medien durch sein sollte, dann wird sie vermutlich auch wieder schnurren.

Kannst ja mal eine performante Hardware nehmen und zu jedem Bild und jedem Filmchen das du hast mehere Vorschauen und Komprimierungen errechnen lassen.

 

[iOOi]

Mit dem Wandeln hat die DS nichts zu tun, das machen die Prozessoren in den beteiligten den Client Rechnern mittels dem Synology Photo Station Uploader.

Die Indizierung der Fotos habe ich abgeschaltet. Sie indiziert nur mehr die anderen Daten.

Abgesehen von DNS, SMB, Hochladen der Fotos und ab und zu ein Backup hat die DS nichts zu tun.

 

[Puppetmaster]

Nicht stimmig.
Du schreibst ja selbst, die DS indiziert noch (was auch immer). Also hat sie ausreichend zu tun.

Natürlich hat die DS nichts mit der Konvertierung zu tun, wenn du den Uploader verwendest. Gemeint war, was die DS grundsätzlich stark belastet. Und da gehört dann eben auch die Indizierung dazu.

 

[ottosykora]

Fotos einzelnen Freunden die bei gemeinsamen Aktionen dabei waren, einfach zur Verfügung zu stellen.

10^6 Fotos zeigen?

 

[Alfons403]

Warum nicht, die neuen Krimiserien bei den Privaten sind so mau,
dann kann man ja auch Stundenlang Bilder gucken!

 

[iOOi]

Ich fotografiere halt gerne.

Besonders mühsam: Diesen Ordner mit zahlreichen unter und unterunter Ordnern habe ich nun schon mehrfach neu hochgeladen, da immer wieder abgestürzt. Jetzt braucht er schon 20h bis er die Frage nach der Videoauflösung stellt.

Dann kommt das:


Passiert nun immer öfter.

Verbindung zur DS steht.

 

[iOOi]

Kann man hier ein Foto auch so hochladen, dass es nicht in Briefmarkengröße erscheint?
Hochgeladen hatte ich ein GIF mit 688 x 1151 x 265.

 

[ottosykora]

ja, zu jedem Bild werden mehrere Version berechnet und abgelegt. Kommt dann darauf an wie und womit man sie anschauen will, dann wird automatisch die richtige Version ausgewählt.

 

[Alfons403]

Ich glaube Du musst Dich von dem Gedanken verabschieden, die Photostation als
universelle Bilder Datenbank zu sehen. Alleine wenn ich von meiner D300 ausgehe
mit jeweils 8 MB großen JPG Bildern sind das immerhin 8 TByte an Daten. Ich sichere meine
Bilder auch unter anderem auf der DS, aber die Bilder in der Photostation sind nur eine Besten auslese.
Ich kenne jetzt keine NAS, die solch eine Datenmenge schnell zu einem tragbaren Preis verarbeiten könnte.
Und bei solch einer Datenmenge täte auch ein professionelles Bildverwaltungsprogramm für die Vorauswahl gut.

 

[bongo]

Langsam vermute ich, dass die DS918+ mit 2 Stück M.2 Cach SSDs und 40TB HDDs ein Fehlkauf war. :-(
Ich fürchte, sie taugt mit der viel zu schwachen CPU nur als Backupziel.

Ich habe auch eine ähnliche Konfiguration DS918+ mit Schreib-/Lese-Cache und Netzwerk Bounding mit den zwei Netzwerkadaptern. Habe ca. 100.000 Fotodateien.

Warum machst du das eigentlich mit dem Uploader? Ich kenne den Uploader nicht. Ich würde die Dateien einfach auf die Freigabe photo kopieren (als Administrator, sonst hast du keine Berechtigung). Die Indezierung macht dann die PhotoStation. Das kann natürlich einige Tage dauern.

Die PhotoStation hat natürlich seinen Reiz wenn man die Fotos weiterleiten und präsentieren möchte. Aber die Tatsache, dass man nur als Administrator auf die photo-Freigabe Schreibzugriff hat, hat mich aus Sicherheitsgründen abgeschreckt. Ich nutze auch eine "richtige" Fotodatenbank (IDImager) die Schreibzugriff benötigt wenn ich Metadaten ändere.

Auf meiner alten DS411+II konnte ich noch die PhotoStation und IDImager als normaler User gemeinsam nutzen. Das war wohl historisch bedingt. Wenn man jetzt PhotoStation neu installiert ist die photo-Freigabe für normale User immer Readonly.

Ich finde die PhotoStation mehr für Knipser (hoffentlich habe ich jetzt niemand beleidigt ;-)) und nicht für ambitionierte Fotografen geeignet. Mit Moments wird es nicht anders sein.
Ich nutze die Photostation im Moment aus den genannten Gründen nicht. Im Netzwerk greife ich über DLNA zu.

Gruß
Bongo

 

[ottosykora]

Warum machst du das eigentlich mit dem Uploader? Ich kenne den Uploader nicht. Ich würde die Dateien einfach auf die Freigabe photo kopieren (als Administrator, sonst hast du keine Berechtigung). Die Indezierung macht dann die PhotoStation. Das kann natürlich einige Tage dauern.

dann wäre Zeit es zu probieren
Mit dem Uploader werden die Berechnungen auf dem PC gemacht und das geht mehrfach schneller als mit der DS.
10^6 Bilder mit der PS zu konvertieren könnte Monate dauern.

Im Netzwerk greife ich über DLNA zu.

na ja, jedem das seine, aber genau das versuchen viele Leute zu vermeiden

 

[Alfons403]

I

Die PhotoStation hat natürlich seinen Reiz wenn man die Fotos weiterleiten und präsentieren möchte. Aber die Tatsache, dass man nur als Administrator auf die photo-Freigabe Schreibzugriff hat, hat mich aus Sicherheitsgründen abgeschreckt. Ich nutze auch eine "richtige" Fotodatenbank (IDImager) die Schreibzugriff benötigt wenn ich Metadaten ändere.
Bongo

Irgendwie versteh ich das nicht, warum man "nur als" Administrator....!
Nur der/ein Admin legt einen Benutzer an.
Dabei wird beim Anlegen bestimmt, ob er Kontoänderungen vornehmen darf.
Nach dem Anlegen hat bei mir der neue Benutzer nur Leserechte auf das Deckblatt, alles Andere
muss der Admin einstellen.
Anders läuft das natürlich nur bei der persönlichen Photostation.