Robots.txt

Aus Wiki.csoft.at

Die Datei robots.txt beinflußt das Verhalten von Suchmaschinen


Allen Suchmaschinen das Indizieren erlauben:

User-agent: *                   # all robots not specified earlier
Disallow:                       # allow everything


Siehe auch