Johannes Beus
(Autor)
13.06.2004
Laut eines Beitrages auf webmasterword.com besteht nun die Möglichkeit, den MSNBot zu limitieren:
User-Agent: msnbot
Crawl-Delay: 20
20 ist hier die Zahl der Sekunden, die der MSNBot zwischen 2 Zugriffen warten soll.
