robots.txt

Erstellt von ichichich um 14:39 in skindesign

Werden die Einträge in der skin "Search robot restrictions" eigentlich verarbeitet? Egal was ich da eintrage, meine robots.txt sieht immer so aus:

# Exclude the two bots with the biggest greed/relevance


ratio till our performance problems are fixed. -hw
User-agent: Slurp
Crawl-delay: 60
User-agent: fast
Disallow: /

User-agent: Scooter Disallow: /