AutoPilot AutoPilot für externe Datenträger

[Tommes]

@Bernd_Eifel
Da mir das Erstellen von YouTube Videos nicht sonderlich liegt, auch wenn ich schon einige erstellt habe, wird das mit dem Erklären etwas schwierig.Nichtsdestotrotz habe vorhin bereits damit begonnen, ein HowTo über Download, Installation und Erstkonfiguration zu schreiben, welches ich zukünftig meinen GitHub Tutorials (siehe meine Signatur) hinzufügen werde. Wann genau ich dazu komme, ein HowTo zu schreiben, das anschaulich erklärt, wie man einen externen Datenträger für AutoPilot gefügig macht, kann ich noch nicht genau sagen, aber ich bin da dran. Sobald ich was zum Vorzeigen habe, melde ich mich hier nochmal.

 

[Tommes]

@Bernd_Eifel und natürlich an alle anderen, die es interessiert und lesen möchten...

HowTo: AutoPilot - Herunterladen. Installieren. Einrichten.​

Ich hoffe, das damit alle Klarheiten beseitigt wurden.

Viel Spaß damit

Tommes

 

[hglaeser]

Hallo,

ich bin neu hier im Forum, nutze Synology-NAS aber seit vielen Jahre, sowohl privat als auch dienstlich (DS216play, DS220+, RS1619XS+, etc.) und habe auf meinem private DS216Play (ja, schon recht alt aber läuft noch gut) mit aktuellen DSM 7.2 und HyperBackup 4 ein Problem mit AutoPilot.

Als erstes aber vielen Dank an Tommes für seine unglaubliche Arbeit und seinen Einsatz.

Auf der DS216Play konnte ich AutoPilot laut seiner heutigen Anleitung sauber installieren und die Skripte zu meinem HyperBackup-Testbackup anlegen und mit einer ext. USB-Festplatte verküpfen.

Problem: Es passiert nichts beim Anstecken der ext. USB-Platte ans NAS. Das AutoPilot-Protokoll bleibt leer. Das gleiche auf einem DS220+ (auch mit DSM 7.2 und HyperBackup 4) funktioniert problemlos. Das HyperBackup-Testbackup wird automatisch nach Anstecken der USB-Platte ausgeführt und im Log ist alles schön nachvollziehbar. Übrigens ein sehr sauber aufgezogenes System, was Tommes da gebaut hat. Hut ab.

Die DS216Play hat eine "STM Monaco STiH412"-CPU, da laufen auch einige spezielle Synology-Pakete nicht bzw. sind im Paket-Manager nicht verfügbar. Aber Standard-Pakete wie Mailserver, Hyperbackup, Photos, Contacts, Calender, Drive Station, etc. funktionieren alle out of the box. Die DS220+ hat einen INTEL Celeron J4025.

Kann diese eigenartige CPU des DS216Play dazu führen, das AutoPilot den Anschluss der Platte nicht mitbekommt?

Ich hatte bisher unter DSM 6.2 noch die alte AutoRun-Geschichte von Jan Reidemeister laufen. Klappte immer. Ist aber nicht schön. Auch unter DSM7.2 klappt das automatische Backup mit AutoRun v1.10.0-0011 (jetzt von Horst Schmid weiter entwickelt). Das heißt, AutoRun bekommt die angesteckte USB-Platte mit und startet das Script von dort. Ich hab da einfach das von AutoPilot erstellte Script zum Starten des HyperBackups verwendet und als "autorun" auf die ext. Platte kopiert. Sicherheitstechnisch ist das aber alles nicht so schön mit dem Paket "Autorun". Insgesamt ist AutoPilot die deutlich professionellere Lösung (meiner Meinung nach). Es waren immer entweder AutoPilot ODER Autrun gestartet, nie beide Pakete gleichtzeitig (nur um sicherzugehen, dass sich beide Pakete nicht irgendwie behindern).

Wo könnte ich noch nachschauen, um herauszufinden, warum es bei AutoPilot auf der DS216Play klemmt?

Sorry für den langen Text und vielen Dank im Voraus für Eure Antworten.

 

[Tommes]

Hallo @hglaeser und willkommen im Forum!

Zunächst einmal recht herzlichen Dank für deine lobenden Worte. Was dein Problem betrifft, so kann ich nur mutmaßen, zumal auf all deinen Systemen DSM 7.2 zu laufen scheint. Spontan würde mir nur eine Kleinigkeit auffallen, was das gute alte autorun bzw. der Fork von Horst Schmid (der im übrigen seit gut 2 Jahren auch nichts aktuelleres mehr herausgegeben hat) anders machen als AutoPilot.

Solltest Du dich auf der Konsole des DSM ein wenig auskennen, könntest Du folgendes versuchen. Melde dich über ein Terminal Programm als root per SSH am DSM an und editiere die Datei /usr/lib/udev/rules.d/99-autopilot.rules. Der Inhalt der Datei sieht so aus…

SUBSYSTEM=="block", ACTION=="add", ENV{DEVTYPE}=="partition", PROGRAM="/var/packages/AutoPilot/target/ui/autopilot.sh %k"

Tausche das Wort PROGRAM gegen das Wort RUN+ aus, also so…

SUBSYSTEM=="block", ACTION=="add", ENV{DEVTYPE}=="partition", RUN+="/var/packages/AutoPilot/target/ui/autopilot.sh %k"

Speicher die Datei und Versuch es dann nochmal mit dem externen Datenträger an deiner DS216Play. Falls das nicht klappen sollte, starte die DS einmal neu und Probier es erneut. Falls das dann immer noch nicht klappt, wüsste ich für den Moment auch nicht weiter.

 

[wegomyway]

@Tommes, jetzt muss ich Multitaskfähig sein. Lesen und Bilder gucken
ABER ... Freizeit opfern und gutes tun . Natürlich mal durchgeackert, da komm ich mit klar

 

[Tommes]

Ach du armer. Hast mein vollstes Mitgefühl. Lesen und gleichzeitig Bilder schauen ist echt schon hart an der Grenze des zumutbaren und ist auch etwas völlig anderes als sich von YouTube Videos berieseln zu lassen oder sich durch Instagram zu flitschen. Aber falls es dich tröstet, Themen zu recherchieren, Texte zu schreiben, dabei Rechtschreibung, Formulierung und Satzstellung zu beachten, den Text anschließend nach Markdown umzuformatieren und am besten noch alles ins englische übersetzen, wissen wie man ein Repository auf GitHub betreut, Screenshots erstellt und nacharbeitet und und und…. das lässt sich mit Multitasking garnicht mehr erfassen.

Nein. Alles gut. Ich mach nur Spaß und würde mir das alles keinen Spaß machen, dann würde ich es nicht tun. Auch wenn es niemanden etwas angeht, was ich meiner Freizeit tue, so ist das, was ich hier mache auch ein Stück weit der geistige Ausgleich zu meinem Beruf. Da arbeite ich mehr mit den Händen und Muskeln, als mit meinem Kopf (auch wenn ich natürlich nicht kopflos vor mich hin arbeite). Egal…

Am Ende zählt das Ergebnis und wenn damit alle zufrieden sind, dann bin ich es auch. Und scheinbar ist das so, weil du damit ja klar kommst

 

[luddi]

...ist die Schuld von @luddi denn ohne ihn würde es...

Schuldig im Sinne der Anklage.

 

[hglaeser]

Hallo Tommes,

vielen Dank für Deine superschnelle Antwort zum Sonntag und Deinen Lösungsansatz. Der hat leider nicht geholfen (auch nicht mit Neustart des NAS) und ich habe die Änderung wieder rückgängig gemacht (RUN+ > PROGRAM). Ich bin aber der eigentlichen Ursache näher gekommen:

Meine ext. Test-Festplatte mit 4TB ist GPT-partitioniert und hat aus irgendeinem Grund noch einen kleinen ungenutzten Speicherbereich vor der einzigen großen 4TB-Partition. Beide NAS (DS216play und DS220+) bringen immer einen Hinweis beim Anstecken der Platte, dass eine Partition nicht bereitgestellt werden konnte. Das scheint dieser kleine freie Bereich zu sein. Die eigentliche große Daten-Partition wird sauber gemountet. Auf dem DS220+ startet AutoPilot die HyperBackup-Aufgabe, aber auf der DS216play nicht. Warum auch immer. Auf der DS220+ (dient aktuell nur als Netzwerk-Backup-Ziel per HyperBackup Vault) laufen keine weiteren Pakete. Auf der DS216play laufen dagegen viele: Mailserver, Mailstation, Drive Station, Photos, VPNServer, etc.

Mit einer anderen kleineren USB-Platte (MBR, 2TB, nur eine Partition über die gesamte Festplattenkapazität) funktioniert HyperBackup per AutoPilot auf der DS216Play. Es kommt auch keine DSM-Meldung über nicht bereitgestellte Partitionen.

Nun habe ich mir die 4TB-Platte mit dem "MiniTool Partition Wizzard" angesehen und versucht, diesen freien Speicherbereich in die große Datenpartition aufzunehmen oder beides zusammenzuführen. Ging nicht. Mit EaseUS Partition Manager Pro (kostet aber etwas Geld), klappte es dann (einfach die große Partition nach vorn erweitern).

Und siehe da, beim Anstecken der 4TB-Platte kommt nun keine DSM-Meldung mehr bzgl. nicht-bereitgestellter Partitionen und AutoPilot startet artig den Test-HyperBackup-Job auf dem DS216play.

Nun bin ich ein Backup-Fetischist und hab weitere 2TB- und 4TB-Platten (MBR und GPT) für Backups. Bei allen vier ext. Festplatten sahen die Partitionsschemas leicht unterschiedlich aus, aber immer mit einigen wenigen MB an ungenutzten Speicherbereichen am Anfang und/oder am Ende und bei allen kam im DSM 7.2 beim Anstecken diese Meldung: "Die Partition x konnte nicht bereitgestellt werden." und AutoPilot starte das Backup nicht.

Bei allen habe ich dann mit EaseUS Partition Manager Pro die Partitionen auf die gesamte Festplattengröße erweitert und danach kam keine DSM-Meldung mehr und AutoPilot konnte auf der DS216play die Backups ausführen. Ziel erreicht.

Warum AutoPilot nur auf der alten DS216play die neu angesteckten Festplatten nicht mitbekam, kann ich nicht sagen. Aber der Grund sind/waren definitiv diesen kleinen freien Speicherbereiche bei fast allen meiner ext. Festplatten.

Die Platten habe ich nach dem Kauf nicht selbst so partitioniert, die waren schon so. In Zukunft schau ich mir die Partitionierung an, bevor ich neue Festplatten nutze und passe sie ggf. an.

Vielleicht noch zur Info: Ich bin gestern erst auf der DS216play von DSM 6.2 auf 7.2 (über 7.0 und 7.1) gewechselt. Unter DSM 6.2 kam diese Meldung beim Anstecken der ext. Platten nie, das eine Partition nicht bereitgestellt werden konnte. Man findet auch einige Meldungen im Internet, das DSM seit 7.0 diese Meldungen meist bei großen ext. Festplatten ab 4TB ausgibt.

Ich wusste schon, warum ich dieses Upgrade auf DSM 7 so ewig vor mir hergeschoben habe. Never touch a running system. Möchte aber auch nicht wissen, welche Sicherheitslücken auf dem DSM 6.2 noch offen waren. Dieser ganze Spaß hat mich seit gestern Abend ca. 10 Stunden Zeit und unendlich viele Tests gekostet. Das ist aber kein Vorwurf an Tommes, viel eher an mich selbst, vielleicht auch an Synology und die Hersteller der ext. Festplatten.

Zum Schluss noch einmal vielen Dank für AutoPilot. Gibt es ein Paypal-Konto, damit ich mich erkenntlich zeigen kann? Bitte keinen Spruch wie "Ich mach das nur aus Spaß und brauch ne Abwechslung zur körperlichen Arbeit". Ich bin beruflich selbst Software-Entwickler und froh, dafür bezahlt zu werden. Da möchte ich andere gern unterstützen. Wenn das keiner macht, werden solche tollen Projekte und der ganze Support eingestellt und davon hat am Ende auch niemand etwas.

Verdammt, wieder so viel Text zusammen gekommen. Sorry, musste mich mal auskotzen. Bei meiner Frau rede ich mit solchen Probleme gegen eine Wand, sie versteht mich diesbezüglich leider nicht ;-) Jetzt kann ich aber endlich zufrieden ein Feierabend-Bier genießen.

Schönen Sonntag Abend noch.

 

[wegomyway]

Gparted ist kostenlos und äußerst wirksam.
https://gparted.org/
Unter LiNUX on Board

 

[Tommes]

@hglaeser Vielen Dank für deinen ausführlichen Bericht zur Lösungsfindung. Fand ich super interessant zu lesen. Das Beste daran ist natürlich, das du das Problem selbst lösen konntest.

Dieser ganze Spaß hat mich seit gestern Abend ca. 10 Stunden Zeit und unendlich viele Tests gekostet.

Du hast keine Vorstellung davon, wie oft ich manchmal da hocke um Stunden oder Tage nach Lösungen für Probleme zu suchen, die mir Anwender meiner Programme zugetragen haben.

Zu meiner Verteidigung möchte ich aber auch erwähnen, das das mounten externer Datenträger und die Vergabe von Geräte- und Laufwerksbezeichnungen ausschließlich durch den DSM abgewickelt werden. AutoPilot wertet diese Informationen im Anschluss nur aus und verarbeitet sie weiter. Auch der hier oft erwähnte UDEV-Gerätertreiber, dessen einzige Befehlszeile du durch das ändern von PROGRAM zu RUN+ bereits kennengelernt hast, tut nicht anderes als darauf zu warten, das der DSM das Script, nachdem bereits zuvor viele andere Scripts durchgelaufen sind, ausführt um die erhaltenen Informationen an AutoPilot weiterzuleiten.

Was ich damit sagen möchte ist, das wenn ein Fehler beim mounten auftritt, ich darauf keinen Einfluss nehmen kann. AutoPilot ist diesbezüglich davon Abhängig, was der DSM mir bzw. AutoPilot vorwirft. Selbst wenn ich wollte, könnte ich nichts daran ändern.

Bitte keinen Spruch wie "Ich mach das nur aus Spaß und brauch ne Abwechslung zur körperlichen Arbeit".

Okay, dann halt diese Ausrede. Ich habe bereits soviel Geld durch Spenden mit AutoPilot verdient, das ich nicht mehr weiß, wohin damit. Besser?

Im ernst. Ich hatte kurzzeitig solch eine PayPal Donate Button in meinen GitHub Repositorys aber ganz ehrlich… das ist absolut nicht meins. Nicht das ich Geld verabscheuen würde, aber wenn mir jemand Geld für meine Arbeit gibt, fühle ich mich verpflichtet, mich weiterhin um meine Projekte kümmern zu müssen. Vor kurzem erst habe ich Basic Backup an den Nagel geghängt und ich hätte mich wirklich schlecht gefühlt wenn ich von euch zuvor Geld kassiert hätte, auch wenn es sich dabei um freiwillige und unverbindliche Spenden gehandelt hätte. Von daher tut es mir wirklich leid, dir sagen zu müssen, das ich das alles tatsächlich nur aus Spaß an der Freud mache. Und wenn ich morgen früh aufwache und meine, alles hinter mir lassen zu müssen, dann könnte ich das reinen Gewissens tun. That‘s all, ob es dir passt oder nicht.

Ich habe fertig.

 

[Tommes]

@wegomyway ich bin mir nur nicht sicher, ob GParted auch Partitionen verschieben kann. Ich glaub du kannst damit nur Partitionen verkleinern oder vergrößern, jedoch nicht verschieben. Unter Windows hatte ich das zuletzt immer mit dem bereits erwähnten „MiniTool Partition Wizzard“ bewerkstelligt, was laut @hglaeser jetzt wohl nicht mehr möglich ist. Vielleicht hatte ich das auch mit Windows Bordmittlen gemacht. Ich weiß es nicht mehr

 

[DaveR]

Du hast keine Vorstellung davon, wie oft ich manchmal da hocke um Stunden oder Tage nach Lösungen für Probleme zu suchen, die mir Anwender meiner Programme zugetragen haben.

I do

 

[Berlon]

@Tommes,
setze Autopilot seit zwei Monaten ein.
Beeindruckend geräuschlos.

Hatte vorher ein Scriptgebastel mit mounten des Laufwerks, HB Sicherung und Auswerfen der Platte.
Alles über Zeitsteuerung. War eine sehr wackelige Konstellation, die öfters fehlschlug.
Aber ich bekam immer eine E-Mail über Erfolg oder Fehlschlag.

Dies fehlt mir jedoch. Seit ich Autopilot verwende, bekomme ich keine Mails von HB mehr.
In DSM über die Sprechblase-->Einstellungen habe ich in "Benachrichtigungseinstellung" ein Häkchen bei Hyperbackup.
Muss ich da noch was einstellen?

Gruß
Berlon

 

[Tommes]

Primär haben AutoPilot und Hyper Backup keine Gemeinsamkeiten. AutoPilot startet nur ein Hyper Backup, überwacht dessen Laufzeit und meldet nach Abschluss des Auftrags nur zurück, das der Prozess durchgelaufen ist. Ob das Hyper Backup dabei erfolgreich durchgeführt wurde oder nicht, weiß AutoPilot nicht. Ebenso hat AutoPilot keinen Einfluss auf E-Mails, die durch Hyper Backup ausgelöst und verschickt werden sollen. Es gibt in AutoPilot nicht mal eine Funktion, um eine E-Mail-Benachrichtigung zu konfigurieren.

Eine E-Mail-Benachrichtung stellst du im Hyper Backup Auftrag unter Aufgabeneinstellungen im Reiter Einstellungen aus, indem du den Haken bei „Aufgabenbenachrichtigung aktivieren“ anhakst.

 

[Berlon]

Danke für deine Antwort,
Das Häkchen sitzt an der angegebenen Stelle.
Bekomme von anderen Bereichen aus der DSM Nachrichten.
Die Benachrichtigung in der DSM ist also richtig eingetragen.

Muss ich dann mal nachforschen wo es hakt.

Aber ansonsten ein sehr gelungenes Projekt!

Gruß
Berlon

 

[Tommes]

Was passiert denn, wenn du den Hyper Backup Auftrag manuell, also nicht über AutoPilot ausführst? Bekommst du dann eine Email?

 

[Berlon]

@Tommes,
wie kann ich für den Versuch den Start von Autopilot unterbinden?

 

[Tommes]

Ich lauf nicht weg

 

[Tommes]

@Berlon Die Frage meinst du jetzt nicht ernst, oder? Auch ist das nachträgliche ändern von Beiträgen, vor allem wenn jemand bereits darauf geantwortet hat, ein absolutes No Go!

 

[Berlon]

Sorry, bin nicht der Forumsfuchs.
Kommt nicht mehr vor.