User-Agent

df1kf

Lieutenant
Registriert
Juli 2004
Beiträge
665
Guten Tag,

welche Bedeutung hat der unten kopierte Befehl ?

User-agent: *
Disallow: /feeds
Allow: /*/_/rsrc/
Disallow: /*/_/

Icch bitte um einen Rat.

Wolf
 
Das ist kein Befehl, das sieht aus wie Teil einer robots.txt Datei.

Für alle User-Agents (also alle automatisierten Browser und Skripte wie z.B. den Googlebot). Diese dürfen bestimmte Bereicher der Webseite nicht indizieren, wie z.B. das Verzeichnis /feeds, irgendwelche Ressourcen aber schon.

Diese Datei ist für dich nur relevant falls du einen Webserver mit Webseite drauf hast.
http://de.wikipedia.org/wiki/Robots_Exclusion_Standard
 
Zuletzt bearbeitet:
Zurück
Oben