robot.txt zum Aussperren der Suchmaschinen

[stealthT]

Hallo!

Das Thema wurde hier bislang (soweit ich es zumindest gesehen habe) nur mal kurz angeschnitten. Wäre für eine Rückmeldung dankbar, ob mein Vorhaben so richtig ist:

Ich möchte meine Seite vor Suchmaschinen (soweit dies überhaupt möglich ist) schützen/verbergen. Hierzu würde ich eine Datei, welche ich robot.txt nenne, einfach unter /volume1/web abspeichern, in welche ich eintrage:

User Agent: *
Dissallow: /

Ist dies so korrekt, damit der gesamte Webordner der Regel unterliegt oder muss hinter Dissallow noch das Verzeichnis eingetragen werden. Wie gesagt: Ich will keine Ordner oder Dateien hiervon ausnehmen.

 

[jahlives]

Soweit korrekt (ausser Disallow). Mehr dazu bei http://www.robotstxt.org/robotstxt.html

 

[stealthT]

Danke. War mir nicht sicher, ob man bei der DS noch den Pfad spezifizieren muss.

Müsste noch korrigieren:

User-agent

 

[jahlives]

Müsste noch korrigieren:

User-agent

Das habe ich voll übersehen