Webseite als .txt speichern

[insai]

Hallo Leute

ich würde gerne zeitgesteuert immer die gleiche Webseite (https://onlineradiobox.com/us/fm100/playlist/) als .txt File speichern (1mal täglich)

Bisher mache ich es per wget
wget -k --html-extension --directory-prefix=/volume1/Gemeinsam/wget https://onlineradiobox.com/us/fm100/playlist/,
und danach konvertiere ich die html-Seite auf dem PC mit verschiedenstens Tools.
Also dreimal rund um den Baum laufen dann raufklettern und: runterfallen

Weis mir jemend einen Tip wie ich das auf der Synology gleich in ein txt-Format griegen damit ich es am PC weiterverarbeiten kann?

Mit einem Onlineconverter grieg ich das hin: https://convertio.co/de/txt-umwandeln/, aber das wiederspricht dem automatischem abarbeiten, ich will ja nicht jeden Tag das machen.
Die Ausgabe vom convertio hab ich mal angehängt.

Im Prinzip ist es mir ganz egal wie man das macht.
Ob man einen Onlineconverter autom. anspricht und das file dann runterlädt oder es gleich (vorzugsweise) auf der Synology hinbekommt.
Aber bitte dran denken: der grosse Linux-Guru bin ich nicht gerade


Ziel der ganzen Aktion ist dass ich eine ewige Liste aller gespielten Lieder erhalten (keine Wiederholungen) das ganze dann mit meinem Bestand vergleiche und neue Lieder danach auf einer extra Liste ausgeben (alles dann auf dem PC, weil Linux.. ihr wisst ja ..)


Sollte der Beitrag im falschem Forum sein bitte entsprechend verschieben.

Mit besten Grüßen und herzlichem Dank im voraus
Heinz

 

[Ulfhednir]

Hallo Heinz,

ich weiß nicht, ob dein Weg der eleganteste ist. Daher erlaube mir mal zunächst die Frage: Was ist denn eigentlich das Endziel? Was hast du konkret vor? Das Konvertieren klingt erstmal eher nach einem Workaround für ein eigentlich anders geartetes Problem. Ggf. gibt es ja eine Lösung ohne Zwischenkonvertierung.

 

[Tommes]

Hi!

Da du es einfach haben willst, ohne dich groß mit der Linux Konsole rumschlagen zu müssen, hätte ich eine Möglichkeit für dich.

Damit das funktioniert, musst du dir die SynoCli Network Tools aus der alternaiven Paketquelle SynoCommunity über das DSM Paket-Zentrum installieren. Wie du die Paketquelle einbinden kannst, steht hier beschrieben.

Nachdem du das Tool installiert hast, führst du folgende Schritte aus...

• Wähle im DSM Hauptmenü die Systemsteuerung aus und öffne im Anschluss den Aufgabenplaner.
• Erstelle über die Schaltfläche Erstellen eine neue geplante Aufgabe und wähle im Anschluss ein Benutzerdefiniertes Script aus.
• Vergib im Reiter Allgemein der Aufgabe einen eindeutigen Namen, wähle als Benutzer: root aus. Möchtest du, das der Auftrag im Anschluss automatisch ausgelöst wird, dann setz den Haken bei Aktiviert, ansonsten entferne ihn.
• Falls gewünscht, kannst du einen Zeitplan über den entsprechenden Reiter anlegen. Ansonsten überspringe den Reiter Zeitplan und wechseln gleich zum Reiter Aufgabeneinstellungen. Im unteren Textfeld füge bitte den nachfolgenden Befehl ein, wobei du den Zielpfad /volume1/[SHARED_FOLDER] sowie den Dateinamen html_to_text.txt an deine Bedürfnisse anpassen musst...
  
  

  links -dump https://onlineradiobox.com/us/fm100/playlist/ > /volume1/[SHARED_FOLDER]/html_to_text.txt

  
  
• Beende deine Eingaben mit OK und bestätige die anschließende Warnmeldung ebenfalls mit OK.
• Bei Bedarf kannst die grade erstellte Aufgabe über den Aufgabenplaner manuell ausführen. Markiere dazu die Aufgabe mit der Maus und betätige im Anschluss die Schaltfläche Ausführen, um die Aufgabe einmalig manuell auszuführen. Andernfalls kannst du die Aufgabe auch automatisiert ausführen

Nachdem du die Aufgabe ausgeführt hast, wird im gewählten Ziel deiner DS die Datei html_to_text.txt abgelegt.

Schau mal, ob das für dich zielführend ist.

Tommes

 

[Tommes]

Man kann die Datei html_to_text.txt auch noch durch sed jagen um am Ende die reine Playlist zu erhalten. Dazu ergänzt du im Aufgabenplaner das Textfeld um eine weitere Zeile…

sed -n '/Show by radio station time/,/Install the free Online Radio Box application/p' /volume1/[SHARED_FOLDER]/html_to_text.txt > /volume1/[SHARED_FOLDER]/playlist.txt

… wobei du auch hier wieder den Zielpfad /volume1/[SHARED_FOLDER], den Dateinamen html_to_text.txt sowie den Dateinamen playlist.txt an deine Bedürfnisse anpassen musst. Auch kannst du den Suchstring „Show by radio station time“ nach deinen Wünschen anpassen um den Anfang der Playlist, sowie den Suchstring „Install the free Online Radio Box application“ um das Ende der Playlist zu lokalisieren. Musst halt ein wenig rumspielen.

Als Ergbnis erhalte ich dann…

Spoiler: playlist.txt

[ ] Show by radio station time (now in Honolulu 10:30)

Live Roots Remedy - Blessed
22:24 Kapena - Biggest Fan (feat. Frankie Moreno)
22:20 Big Every Time - Running Back to You
22:09 Eli-Mac - Dub Stop
22:05 Kolohe Kai - Hazel Eyes
22:01 Layne & Jax - Starlight
21:58 Maoli - Bounce (feat. J Boog & Fiji)
21:54 Sons Of Zion - Road Trip
21:51 The Vitals - Light Sleeper
21:47 Micah G - Just Can't Stop
21:37 Willz - You're the Inspiration (feat. Maile)
21:33 Rebel Souljahz - Gotta Know Your Name
21:29 Fia - Fly Away
21:25 Chardonnay - Sweet Island Music
21:21 Josh Tatofi - Sweet Loven
21:10 Jah Maoli - If I Ever (feat. J Boog)
21:06 Josh Tatofi - Landslide
21:03 Roots Makers - Want to Love You (feat. Damon Williams)
20:59 Walt G (Of Kawao) - Squeeze Ya
20:55 Ana Vee - Hawai'i
20:52 Maoli - Midnight Hour (feat. Morgan Heritage)
20:48 Big Every Time - Running Back to You
20:37 Kolohe Kai - Dream Girl
20:35 Kelandy - Sun and Moon
20:31 The Green - Love I
20:28 The Vitals - Ride or Die
20:24 Bruddah Waltah - You Never Know (feat. Ryan Hiraoka)
20:20 Maoli - Bounce (feat. J Boog & Fiji)
20:09 Bo Napoleon - Born and Raised Hawaiian (feat. Kapena DeLima)
20:05 Isaiah Tavares - Reggae Music (feat. Pohaku)
20:02 Brittni Paiva & BLVCKBOW - Second Nature
19:58 Micah G - Just Can't Stop
19:55 Joe Sambo - Beef
19:51 Fia - Take Me
19:48 Josh Tatofi - Sweet Loven
19:36 The Steppas - Calling
19:33 Aisaiah Jacobs - Fallin'
19:26 The Green - Coming Home
19:22 Walt G (Of Kawao) - Squeeze Ya
19:04 Human Era - No Worries (feat. Desmond Oliveira)
19:00 Big Every Time - Running Back to You
18:56 Chardonnay - Hey (feat. PeniDean)
18:53 Common Kings - Islands To Nashville
18:50 Maoli - Bounce (feat. J Boog & Fiji)
18:39 Rebel Souljahz - One Way
18:34 Kolohe Kai - Hazel Eyes
18:31 The Green - Take Me On
18:27 Fia - Morning Time (Awoia)
18:23 Anuhea - Galaxy
18:20 Micah G - Just Can't Stop
18:08 Sammy Johnson - Give Me All (feat. Fiji)
18:04 Willz - You're the Inspiration (feat. Maile)
18:00 J Boog - Ain't No Love Like
17:57 Josh Tatofi - Sweet Loven
17:55 Ka'ikena Scanlan - Utu Bang Bang
17:53 Ekolu - My Beautiful Hawai'i (feat. Mahkess)
17:52 Fia - Games
17:51 Kolohe Kai - This Is the Life
17:51 PeniDean - The Ride
17:49 Roots Remedy - Blessed
17:49 Johnny Suite - God Gave Me You
17:48 Fia - Take Me
17:46 Layne & Jax - Starlight
17:45 Walt G (Of Kawao) - Squeeze Ya
17:37 Sons of Yeshua - Face to Face
17:33 Ikena Dupont - Real
17:30 Josh Tatofi - Landslide
17:26 The Green - I Will
17:23 Sons Of Zion - Drift Away
17:20 Kapena - Biggest Fan (feat. Frankie Moreno)
17:16 Big Every Time - Running Back to You
17:06 Damon Williams - If You're Gonna Go
17:03 Maoli - Bounce (feat. J Boog & Fiji)
16:55 Pieter T - My Baby
16:51 The Steppas - Sticky Shirt (feat. Inna Vision)
16:48 The Vitals - Light Sleeper
16:44 Micah G - Just Can't Stop
16:39 Shaggy - Angel (feat. Rayvon)
16:35 Kolohe Kai - I Think You're Beautiful
16:32 Makua Rothman - Paradise
16:28 Isaiah Tavares - Reggae Music (feat. Pohaku)
16:25 Nesian N.I.N.E. - You Baby
16:20 The Green - All I Need
16:16 Chardonnay - Sweet Island Music
16:12 Josh Tatofi - Sweet Loven
16:06 Braddah Walter Ft. Sons of Yeshua - Home (Olomana Cover)
16:02 Jonah Jaxon - Get Heavy
15:58 Walt G (Of Kawao) - Squeeze Ya
15:54 Josh Wawa White Feat. Dak - Movin' About My Ways
15:50 Ana Vee - Hawai'i
15:47 Maoli - Midnight Hour (feat. Morgan Heritage)
15:43 Big Every Time - Running Back to You
15:38 Damian "Jr. Gong" Marley - Welcome to Jamrock
15:35 L.A.B - Mr Reggae
15:32 Awa - Could've Been (feat. Jasmine Lee)
15:29 LAVA - Summer Vibes
15:26 Koauka - Up, Down Side To Side
15:21 The Green - My Hawai'i (feat. Sean Na'auao, Kaumakaiwa, Kumu Hina)
15:17 Bruddah Waltah - You Never Know (feat. Ryan Hiraoka)
15:14 Maoli - Bounce (feat. J Boog & Fiji)
15:07 Eli-Mac - Tricky One
15:03 Kolohe Kai - Hazel Eyes
14:59 Ekolu - Brighter Days
14:56 Micah G - Just Can't Stop
14:52 Rebel Souljahz - Take a Look In My Eyes
14:49 Joe Sambo - Beef
14:46 Fia - Take Me
14:34 Layne & Jax - Give Me LuV
14:31 Willz - You're the Inspiration (feat. Maile)
14:27 J Boog - Let Me Love You
14:16 Walt G (Of Kawao) - Squeeze Ya
14:12 The Vitals - Temptation F/ Lion Fiyah
14:01 Kolohe Kai - Dream Girl
13:58 Big Every Time - Running Back to You
13:54 General Fiyah - Here to Stay (feat. Three Houses Down)
13:50 Victor J Sefo - Wifey
13:47 b.e.t. - Pacific Time Zone
13:44 Maoli - Bounce (feat. J Boog & Fiji)
13:30 Braddah Walter Ft. Sons of Yeshua - Home (Olomana Cover)
13:27 HIRIE - You Won't Be Alone
13:23 Fia - Come Around
13:01 The Green - Feelings (feat. J Boog & Gyptian)
12:58 Josh Tatofi - Sweet Loven
12:54 Ho'onu'a - She Looks Good Featuring O-shen
12:50 Jah Maoli - Lyrical Killah
12:46 Johnny Suite - God Gave Me You
12:43 Walt G (Of Kawao) - Squeeze Ya
12:37 Sons of Yeshua - Face to Face
12:33 PeniDean - The Ride
12:29 Kolohe Kai - Hazel Eyes
12:26 Anuhea - Looking for Love
12:23 Ka'ikena Scanlan - Utu Bang Bang
12:19 Kapena - Biggest Fan (feat. Frankie Moreno)
12:15 Big Every Time - Running Back to You
12:09 Teki - Not Too Fast
12:05 Willz - You're the Inspiration (feat. Maile)
12:02 Brittni Paiva & BLVCKBOW - Second Nature
11:58 Maoli - Bounce (feat. J Boog & Fiji)
11:55 Fia - Fly Away
11:51 The Vitals - Light Sleeper
11:48 Micah G - Just Can't Stop
11:38 Dillon Pakele - Nothing Now
11:34 Josh Tatofi - Landslide
11:31 The Steppas - Empress Love
11:27 J Boog - Siva Mai (feat. Siaosi)
11:22 Chardonnay - Sweet Island Music
11:19 Josh Tatofi - Sweet Loven
11:09 Nesian N.I.N.E. - She's In the Mood
11:06 Kelandy - Sun and Moon
11:03 Roots Makers - Want to Love You (feat. Damon Williams)
10:59 Walt G (Of Kawao) - Squeeze Ya
10:56 Ana Vee - Hawai'i
10:52 Maoli - Midnight Hour (feat. Morgan Heritage)
10:49 Big Every Time - Running Back to You
10:40 L.A.B - Mr Reggae
10:37 Makua Rothman - Paradise
10:33 Isaiah Tavares - Reggae Music (feat. Pohaku)
10:29 The Green - Come In (feat. Jacob Hemphill)
10:25 Kolohe Kai - Summer to Winter
10:21 Bruddah Waltah - You Never Know (feat. Ryan Hiraoka)
10:17 Maoli - Bounce (feat. J Boog & Fiji)
10:07 Katchafire - Feels Like
10:04 Braddah Walter Ft. Sons of Yeshua - Home (Olomana Cover)
10:00 Jonah Jaxon - Get Heavy
09:56 Micah G - Just Can't Stop
09:53 Joe Sambo - Beef
09:49 Fia - Take Me
09:46 Josh Tatofi - Sweet Loven
09:37 Ekolu - Brighter Days
09:34 LAVA - Summer Vibes
09:31 Kimie Miner Feat. Imua Gar - Make You Say
09:28 The Vitals - Ride or Die
09:24 The Green - Coming Home
09:19 Walt G (Of Kawao) - Squeeze Ya
09:09 Rebel Souljahz - Play Me Like a Fool
09:05 Kolohe Kai - Hazel Eyes
09:00 L.A.B - Why Oh Why
08:57 Big Every Time - Running Back to You
08:53 Chardonnay - Hey (feat. PeniDean)
08:50 b.e.t. - Pacific Time Zone
08:47 Maoli - Bounce (feat. J Boog & Fiji)
08:39 Common Kings - Islands To Nashville
08:35 Ana Vee - Dream Come True
08:31 Willz - You're the Inspiration (feat. Maile)
08:27 Norm - Groove Witcha
08:23 Roots Remedy - Blessed
08:19 Anuhea - Galaxy
08:16 Micah G - Just Can't Stop
08:07 Josh Tatofi - Landslide
08:04 Ikena Dupont - Real
08:00 Josh Tatofi - Sweet Loven
07:56 Lion Fiyah - Inside
07:53 Johnny Suite - God Gave Me You
07:49 Walt G (Of Kawao) - Squeeze Ya
07:40 MAGIC! - Rude
07:36 Sons of Yeshua - Face to Face
07:33 Human Era - No Worries (feat. Desmond Oliveira)
07:31 Kelandy - Sun and Moon
07:27 HIRIE - I Wanna Be
07:24 Fia - Games
07:21 Kapena - Biggest Fan (feat. Frankie Moreno)
07:17 Big Every Time - Running Back to You
07:11 Isaiah Tavares - Reggae Music (feat. Pohaku)
06:57 Ana Vee - Hawai'i
06:55 The Vitals - Light Sleeper
06:39 Inna Vision - Far Away (feat. Jah Maoli)
06:39 Braddah Walter Ft. Sons of Yeshua - Home (Olomana Cover)
06:27 Mike Izon - Purple Haze (feat. damnboy!)
06:23 Chardonnay - Sweet Island Music
06:19 Josh Tatofi - Sweet Loven
06:04 Walt G (Of Kawao) - Squeeze Ya
06:01 Joe Sambo - Beef
05:58 Maoli - Midnight Hour (feat. Morgan Heritage)
05:56 Big Every Time - Running Back to You
05:45 L.A.B - Mr Reggae
05:33 Kawao - Hey Pretty Mama
05:30 Ana Vee - Another One
05:28 Rebel Souljahz - Nothing to Hide
05:06 Micah G - Just Can't Stop
04:52 Fia - Take Me
04:49 Josh Tatofi - Sweet Loven
04:38 Anuhea - Just Keep Jamming (feat. Ariki Foster)
04:35 LAVA - I'm Ready
04:35 Kelandy - Sun and Moon
04:22 The Green - Coming Home
04:06 Isaiah Tavares - Reggae Music (feat. Pohaku)
04:04 Kolohe Kai - Dream Girl
03:52 Common Kings - Islands To Nashville
03:48 Maoli - Bounce (feat. J Boog & Fiji)
03:33 Nesian N.I.N.E. - You Baby
03:22 Micah G - Just Can't Stop
03:09 J Boog - Sunshine Girl (feat. Peetah Morgan)
03:06 LAVA - Summer Vibes
03:03 HIRIE - Respect
02:59 Josh Tatofi - Sweet Loven
02:56 Kelandy - Party on the Wknd
02:53 Johnny Suite - God Gave Me You
02:51 Walt G (Of Kawao) - Squeeze Ya
02:37 PeniDean - The Ride
02:33 Kolohe Kai - Hazel Eyes
02:22 Kapena - Biggest Fan (feat. Frankie Moreno)
02:22 Big Every Time - Running Back to You
02:08 Willz Ft. Maile - You Are the Inspiration
02:04 Ana Vee - Dream Come True
02:01 Maoli - Bounce (feat. J Boog & Fiji)
01:57 HIRIE - She Go
01:53 The Vitals - Light Sleeper
01:50 Micah G - Just Can't Stop
01:39 Dillon Pakele - Nothing Now
01:35 Josh Tatofi - Landslide
01:31 Sons Of Zion - Tell Her
01:27 The Green - All I Need
01:22 Chardonnay - Sweet Island Music
01:19 Josh Tatofi - Sweet Loven
01:09 Fiji - Come On Over
01:07 Kelandy - Sun and Moon
01:03 Rebel Souljahz - One Way
01:00 Walt G (Of Kawao) - Squeeze Ya
00:48 Big Every Time - Running Back to You
00:38 Makua Rothman - Paradise
00:34 Isaiah Tavares - Reggae Music (feat. Pohaku)
00:30 Anuhea - Big Deal
00:27 Ka'ikena Scanlan - Utu Bang Bang
00:25 Bruddah Waltah - You Never Know (feat. Ryan Hiraoka)
00:09 Lion Fiyah - Touchy Feely
00:05 Braddah Walter Ft. Sons of Yeshua - Home (Olomana Cover)
00:01 Ekolu - Brighter Days

Install the free Online Radio Box application for your smartphone and

Tommes

 

[insai]

@Ulfhednir
Danke für deine Antwort.
Wenn man so wie ich nicht unbedingt den grossen Durchblick hat dann wird wohl alles bisserl kompliziert . Beginnend bei der Fragestellung
Erfahrungsgemäss gibts immer bessere Lösungen , aber ich ziehe die vor die ich auch verstehe, ich habe aber die Lösung von Tommes für mich als passend gefunden.

@Tommes

danke herzlich für deine beiden Lösungen
Hat alles so funktioniert wie du super beschrieben hast.
1 kleine Frage hätte ich noch:
Bei der Ausgabe durch den Befehl:
sed -n '/Show by radio station time/,/Install the free Online Radio Box application/p' ....

erhalte ich ja nur noch wenig Text. Um den restlichen Text noch los zu werden müsste ich statt der Suche nach dem String /Show by radio station time/,/Install the free Online Radio Box application/p' nach jeweils einem "Zeilenumbruch" oder was das für ein Zeichen ist suchen lassen, wenn das geht was sollte dann statt: how by radio station time/,/Install the free Online Radio Box application stehen?


Leider überschreibt die Prozedur bei jedem Lauf die bestehende html_to_text.txt und playlist.txt
Bei der html_to_text.txt ist das ja nicht so tragisch aber bei der playlist.txt doch etwas ärgerlich.
Nach den ersten Versuchen hab ich mittels _$(date +%Y%m%d%H%M) einfach einen Zeitstempel angehängt.
Mittlerweile generiere ich mir eine "ewige" Liste mittels Ausgabeumleitung ">>"

Danke herzlich für Deine Unterstützung
Heinz

 

[Tommes]

Hi!

Freut mich zu hören, das soweit erstmal alles geklappt hat. Zugegeben, ich bin in Sachen sed und awk auch noch ein ziemlicher Noob, daher kann ich dir nur bedingt weiterhelfen. Jedoch habe ich da vielleicht etwas für dich, was dich näher an dein Ziel bringt. Du kannst im Textfeld des Aufgabenplaners die Zeile mit dem sed entweder löschen und gegen die nachfolgende Zeile ersetzten, oder du kommentierst die Zeile mit dem sed einfach mit einer vorangestellten Raute # einfach aus.

Probier das mal…

awk '/Show by radio station time/{flag=1; next} /Install the free Online Radio Box application/{flag=0} flag' /volume1/[SHARED_FOLDER]/html_to_text.txt >> /volume1/[SHARED_FOLDER]/playlist.txt

Ansonsten hast du das mit dem > (Datei überschreiben) und >> (Daten am Ende der Datei anhängen) ja schon souverän gelöst. Auch das du einen Timestamp gesetzt hast, obwohl du Eingangs erwähnt hast, das du und Linux keine Freunde seit, überrascht mich. Nicht, das aus dir doch noch ein Linux Nerd wird.

Tommes

 

[insai]

Hi Tommes

danke nochmal für deine Hilfe, klappt hervorragend, genau wie ich es brauche.

.Auch das du einen Timestamp gesetzt hast, obwohl du Eingangs erwähnt hast, das du und Linux keine Freunde seit, überrascht mich. Nicht, das aus dir doch noch ein Linux Nerd wird.

Es ist nicht so dass Linux und ich keine Freunde sind, nur im Laufe meiner Arbeitszeit bin ich nie gross mit Linux in Verbindung geraten.
Wenn ich mir die Beschreibungen von sed und awk anschaue ist das eher hmm.. für mich irgendwie nicht verständlich, aber das liegt wohl eher daran dass mir das Grundwissen fehlt. Auch der Link auf meinen Windowsdesktop zu den Linuxbefehlen hilft mir nicht wirklich weiter.
Muss ich wohl mal schauen obs bei der örtlichen VHS hier sowas dazu gibt.
Seit die Synology hier ihren Platz unterm Schreibtisch gefunden hat muss ich mich wohl mit Linux beschäftigen
Den grauen Gehirmzellen wirds wohl nicht schaden

Herzlichen Dank nochmal
Heinz

 

[Tommes]

Wenn ich mir die Beschreibungen von sed und awk anschaue ist das eher hmm.. für mich irgendwie nicht verständlich…

Fürs Protokoll. Ich hab mir die Zeilen auch nicht aus den Fingern gesaugt, aber ich weiß, wo und wie ich nach solchen Lösungen suchen kann. Den Tip mit awk hatte ich z.B. von hier und den mit sed von hier. Denn wie ich bereits erwähnte, bin ich in Sachen sed und awk auch nicht sattelfest und das, obwohl ich schon lange mit Linux arbeite.

Seit die Synology hier ihren Platz unterm Schreibtisch gefunden hat muss ich mich wohl mit Linux beschäftigen

Muss man nicht zwangsläufig, kann aber hin und wieder ganz nützlich sein. Ich hätte damals auch nicht gedacht, das ich als eingefleischter Windows Nutzer mal so tief in die Linuxwelt eintauche.

Tommes