Keskustelu järjestelmäviestistä:Robots.txt

Lisätietoja tästä sivusta

Tällä järjestelmäviestillä estetään verkkoa selaavia hakurobotteja selaamasta tiettyjä sivuja. Lisätietoa sivustolla http://www.robotstxt.org.

Noudettu kohteesta ”https://fi.wikibooks.org/w/index.php?title=Keskustelu_järjestelmäviestistä:Robots.txt&oldid=54856”

Palaa sivulle ”Robots.txt”.