Robots.txt

Welche Funktion hat die Datei robots.txt im Homepageverzeichnis? Enhält sie Info’s für Suchmaschinen? Welchen Inhalt sollte die Datei dann enthalten?
Tschau Karl

Hi,

Welche Funktion hat die Datei robots.txt
im Homepageverzeichnis? Enhält sie Info’s
für Suchmaschinen? Welchen Inhalt sollte
die Datei dann enthalten?

Du hast es schon gut erkannt: Die robots.txt enthält Informationen darüber, welche Suchrobots („Datensammler“ für Suchmaschinen) welche Dateien lesen dürfen. Ob sie die Datei beachten ist allerdings ihre eigene Entscheidung; man kann sich also nicht darauf verlassen, daß bestimmte Verzeichnisse nicht in Suchmaschinen auftauchen.

Wie die Datei aufgebaut sein muß und noch so einiges mehr erfährst Du bei http://www.suchfibel.de

Cheatah
http://cheatah.net