Spider Trap jetzt in Version 1.0

Spider Trap, ein Projekt von Thomas Zeithaml – vielen aus Foren auch unter dem Pseudonym jr-ewing bekannt – liegt nun in Version 1.0 vor. Spider-Trap erkennt Crawler, die sich nicht an die Vorgaben der robots.txt halten und sperrt den Zugriff für die betreffenden IP-Adressen automatisch. In der jetzigen ersten „vollen“ Version sind zahlreiche Verbesserungen und neue Features eingeflossen, es lohnt sich also, mal einen Blick draufzuwerfen.

Ähnliche Beiträge